betokened:标记的标记器库

代币 注意：被标记已死。 我把它留在这里是为了存档。 相反，使用功能更强大的 。 Parsimonious 是一个解析器组合器库，由于其StringStream和ParseMatch类型，它在标记化方面也做得很好。 Betokened是一个简单的小型 Swift 库，可将字符串转换为标记数组。 它有以下目标： 它总是标记底层字符串。 它被设计得尽可能简单明了。 自定义运算符可用于简化语法。 我在我正在处理的 iOS/OSX 项目中使用它，所以我会彻底检查它。 它还将为每个环境设置目标。 Betokened不是解析器组合器库。 它创建了一个扁平的标记数组，然后您负责将其转换为语法。 它根本不了解层次结构，也永远不会。 （我从未完成的 Parsimonious 解析器组合器库可能会被重新用于做到这一点。） 例子 // Any type can be used as the tok