ist的matlab代码-bdelab:大数据工程实验室

是的matlab代码大数据工程实验室-BDElab 在各种练习中，将通过实际示例演示大数据工程讲座中的概念。 各个任务位于子目录中： （事实/图形模型，Hadoop HDFS，桶） （使用Hadoop MapReduce进行批处理） （使用JCascalog的复杂批处理层管道） （使用Apache Kafka和Storm进行流处理） 一般准备 可以在LI 137（LKIT）池中的所有计算机上处​​理任务。 必要的环境各不相同，并在任务中进行了说明。 基本上： 所有任务的基础是github上的这一任务。 所有任务均基于Java。 具有（或更新），（或您选择的另一个Java IDE）的开发环境是必需的。 此环境应在开发计算机上本地和本地可用（在LKIT计算机上就是这种情况）。 LKIT Hadoop集群 Hadoop集群由主节点和从节点组成。 LKIT中有1个主机和20个从机。 地址遵循以下方案： 该群集当前充当分布式应用程序（基于和）的分布式文件系统（-Hadoop分布式文件系统）和分布式资源管理器（-另一个资源协商器）。 主节点在HDFS中用作所谓的NameNode，用于管理名称和块。