Cloudera-Data-Scientist-Challenge-3:我的 Cloudera Data Science Cha...

这是 Doug Needham 的提交包 数据科学挑战 3 此解决方案的正确编写在此目录中为 Doug_Needham_DSC3_Write_Up.pdf 这段代码的假设是它将在用户标识“dln”下运行。所需的 HDFS 目录结构是： /用户/dln/问题1 /用户/dln/问题1/驱动程序 /user/dln/problem1/svm /用户/dln/问题2 /用户/dln/问题3 /user/dln/problem3/inGraph /user/dln/problem3/OutGraph shell 脚本“setup.sh”执行适当的 hadoop fs -mkdir -p 命令来创建目录。 至于源数据。 下面的所有代码都假设挑战的数据位于以下位置和结构中： /user/dsc/着名的/spam.log /user/dsc/着名的/web.log /user/d