img
share 分享

Spark全栈数据分析

作者:(美)罗素·朱尼

出版社:电子工业出版社

ISBN:9787121351662

VIP会员免费 (仅需0.8元/天) ¥ 39.6

温馨提示: 价值40000元的1000本电子书,VIP会员随意看哦!

电子书推荐

更多资源 展开

Spark从入门到上手实战 评分:

课程是2017年录制,还比较新,还是有学习的价值的 课程简介: Spark属于新起的基于内存处理海量数据的框架,由于其快速被众公司所青睐。Spark 生态栈框架,非常的强大,可以对数据进行批处理、流式处理、SQL 交互式处理及机器学习和Graphx 图像计算。目前绝大数公司都使用,主要在于 Spark SQL 结构化数据的处理,非常的快速,高性能。 基于Spark Core之上的流式处理和结构化数据查询,已被众多公司青睐,在企业中使用最广泛,很多大数据公司都在将以往RDBMS和 Hive中的数据处理,迁移使用Spark SQL。 课程目录: 第1章:SCALA编程(一) 1.大数据分析框架概要、Spark课程学习计划及建议 2.为什么学习SCALA语言及SCALA语言介绍和学习提纲 3.SCALA环境搭建及IDEA安装配置(JAVA安装、SCALA安装及IDEA安装)) 4.SCALA语言HelloWorld及安装总结(作业LINUX系统安装) 5.SCALA中变量的声明(两种方式) 6.SCALA中数据类型及操作符 7.IF语句及WHILE循环、循环表达式及FOR基本使用 8.FOR循环深入讲解及yield功能 9.SCALA中的Breaks使用 10.函数的定义(如何确定一个函数) 11.函数的定义(各种情况下函数定义与使用) 12.函数的作用域、默认参数函数和名称参数函数使用详解 13.变长参数函数和内部函数使用详解 14.匿名函数定义与使用 15.高阶函数定义与使用 16.深入高阶函数的使用 第2章:SCALA编程(二) 17.数组Array和ArrayBuffer 18.SCALA中集合类Collections概要讲解 19.集合类之List和ListBuffer创建与基本操作 20.集合List中常见高阶函数使用详解(一) 21.集合List中常见高阶函数使用详解(二) 22.SCALA中元组创建与使用 23.集合类之Set及常见函数使用 24.集合类之Map创建与遍历 25.集合类综合应用:实现WordCount词频统计 26.类Class的定义与创建对象 27.对象object及apply方法 28.类class的构造方法(主构造方法和附属构造方法) 29.SCALA中的Trait初步使用 30.SCALA中异常的处理及模式匹配初步使用 31.模式匹配之匹配类型、元组 32. CaseClass及在模式匹配中使用 33.Option(Some、Node)及模式匹配使用 34.SCALA中隐式转换详解(结合案例) 35.SCALA中隐式参数详解(结合案例) 36.综合回顾复习SCALA的所有知识要点 第3章:Spark Core(一) 37.SPARK框架学习的基础及与Spark初步认识 38.Spark Feature详解及处理数据三步走策略 39.Spark 学习资源、源码下载及编译详解 40.SPARK 安装目录及使用的方便优点 41.Local Mode配置、启动spark-shell及运行程序测试 42.编程实现WordCount程序(类比MapReduce实现思路) 43.Spark Local Mode深入剖析详解 44.使用IDEA创建MAVEN工程及配置依赖 45.编写Spark Application开发模板 46.深入WordCount程序分析(sortByKey和top函数使用) 47.如何导入Spark源码至IDEA中(Windows下) 48.Spark Standalone 集群架构、配置、启动深入详解及运行spark-shell测试 49.浅析Spark Application运行Cluster组成及spark-submit提交应用 50.深入剖析Spark Application中Job、Stage和Task关系 51.案例:对原始数据进行清洗过滤及实现每日浏览量统计 52.案例:实现每日访客数统计及使用HiveQL进行结果验证、打包运行SparkStandalone集群 第4章:Spark Core(二) 53.Spark Application运行的Deploy Mode详解(结合案例演示) 54.使用spark-submit提交应用运行Standalone集群及性能调优 55.Spark Application运行的EventLog启用 56.Spark HistoryServer配置及使用 57.RDD是什么及创建方式 58.RDD操作类型及持久化详解 59.RDD中常用的Transformation和Action详解(一) 60.RDD中常用的Transformation和Action详

...展开详情
上传时间:2018-06 大小:7KB
热门图书