hadoopio:ScalaJava 库可方便地与存储在 Hadoop HDFS 中的 Avro 文件交互

HadoopIO Scala/Java 库可以方便地与存储在 Hadoop HDFS 中的文件（特别是 Avro 文件）进行交互。 目录 给我看看！ 以下是读取存储在 HDFS 中的 Avro 文件的方法。 思考： # Shell -- note that this command line does not actually work. :-) $ hadoop fs -cat /path/to/file.avro | java -jar avro-tools.jar tojson | head -n 5 # HadoopIO AvroFsReader(cfg).read( " /path/to/file.avro " ) take 5 foreach println 首先我们启动 Scala REPL： # Must be run from the top-level