crunch-lib:用于 Crunch 作业的有用的可重用管道组件

紧缩库 此存储库包含有用的可重用高级组件，用于使用处理数据的常见用例 如果您想尝试一下，它位于中央 Maven 存储库中，因此您可以使用此代码段（或等效于 gradle/sbt/...） < dependency> < groupId>com.spotify.crunch</ groupId> < artifactId>crunch-lib</ artifactId> < version>0.0.5</ version> </ dependency> AvroCollections extract通过字段名称从 Avro 记录的PCollection中extract单个字段，而无需简单的MapFn keyByAvroField使用特定字段的名称对 Avro 记录的keyByAvroField进行PCollection ，无需简单的MapFn s SP