导航
  • 首页
  • 博客
  • 专栏课程
  • 下载
  • 问答
  • 社区
  • 插件
  • 认证
  • 技能树
  • 每日一练
  • 选课程
  • 学习会员
  • 跟我练
  • 电子书
  • 认证
  • 讲师平台
  • 我的学习
  • 消息

大数据Spark实战视频教程-

共135节36747人学习张长志 课程详情 领证书

  • Spark实战part1

    • 1.spark介绍_整体架构_源码下载
    • 2.spark虚拟机安装_centos安装
    • 3.网络配置与关闭防火墙
    • 4.操作远程工具的使用（winscp_CRT）
    • 5.yum配置
    • 6.jdk安装
    • 7.配置集群ssh免密码登录
    • 8.hadoop安装
    • 9.hive与mysql安装与链接
    • 10.zookeeper安装
    • 11.scala安装
    • 12.kafka安装
    • 13.spark安装
    • 14wordcount小程序

  • Spark实战part2

    • 1.架构图
    • 2.案例讲解
    • 3.通过scala计算wordcount
    • 4.scala在window上面安装与path配置
    • 5.scala简单语法的介绍
    • 6.scala类的编写和演示
    • 8.IDAE的安装与配置
    • 9函数与方法的转换
    • 10添加数组与遍历数组
    • 11元组集合操作
    • 12可变类型map set
    • 13 scala常用的函数通过小案例讲解
    • 14scala单词统计案例讲解

  • Spark实战part3

    • 1回顾昨天语法
    • 2类与伴随对象的权限讲解
    • 3构造方法讲解
    • 4.辅助构造器
    • 5.单利对象与伴生对象
    • 6短信案例分享
    • 7apply方法
    • 8scala继承与实现
    • 9匹配字符串_类型_数组_元组
    • 10可选函数_偏函数
    • 11scala基础语法回顾
    • 12actor多线程案例讲解

  • Spark实战part4

    • 1回顾类对象_Actor
    • 2单机版本的wordcount
    • 3.架构
    • 4分享
    • 5回顾ActorWorCount
    • 6spark一个简单的运算过程
    • 7柯里化
    • 8在IDEA里面搭建maven工程
    • 9代码实现spark集群Master与worker通信
    • 10在IDEA里面通过maven打jar

  • Spark实战part5

    • 1.wordcount原理回顾
    • 2.隐士转换
    • 3隐式转换2
    • 4并行化操作
    • 5transformation与action总体介绍
    • 6统计每行出现的次数
    • 7将集合中每个元素乘以2
    • 8过滤出集合中的偶数
    • 9flatMap案例_将文本行拆分为多个单词
    • 10通过groupbyKey进行分组
    • 11reduceByKey统计每个班级的总分
    • 12sortbyKey学生分数进行排序
    • 13join案例班级合并
    • 14常用的action操作
    • 15saveAsTextFile保存到hdfs

  • Spark实战part6

    • 1.任务调度器
    • 2.任务调度器一个补充
    • 3spark工作原理与RDD介绍
    • 4maven安装
    • 5sparkjava版本wordcount本地执行
    • 6一些spark专业名词
    • 7人人车爬虫分享
    • 8项目分享
    • 9spark_java版本的集群模式
    • 10spark集群上面参数一些介绍
    • 11spark_scala_单机版本
    • 12spark_scala集群演示
    • 12回顾spark架构
    • 13服务器时间校准
    • 14wordcount原理分析
    • 15spark架构原理

  • Spark实战part7

    • 1.持久化操作
    • 2持久化一个补充
    • 3accumulator与共享变量
    • 4统计单词降序排列
    • 5二次排序
    • 6取出前三个排名最高的数据
    • 7取出每个班级里面最高分数的三个学生
    • 8sparlsql发展史
    • 9sparksql_scala版本jar包替换
    • 10spark中RDD与DateFrame互相转换
    • 11通过反射讲RDD转换为DataFrame_java版本
    • 12通过反射讲RDD转换为DataFrame_scala版本

  • Spark实战part8

    • 1.回顾_动态将RDD转换成DF
    • 2.动态将RDD转换成DF_scala版本
    • 3.通用的load和save操作
    • 4手动指定数据源类型
    • 5数据源Parquet之使用编程方式加载数据
    • 6.编译新的hive源码
    • 7.学生分享
    • 8自动分区推断
    • 9.合并元数据
    • 10总结sparksql的作用
    • 11JSON综合性复杂案例查询80分以上学生信息
    • 12JSON综合性复杂案例查询80分以上学生信息_scala
    • 13hive数据源实战java版本
    • 13hive数据源实战scala版本

  • Spark实战part9

    • 1jdbc简介与创建数据库和表
    • 2.spark_sql_java版本_jdbc
    • 3.mysql权限设置
    • 4学生分享
    • 6公司移动实战代码实战5根据移动公司数据统计家庭和工作地址业务介绍
    • 6公司移动实战代码实战
    • 7公司移动实战代码实战_第二种方法处理
    • 8复习spark原理
    • 9.公司移动实战读取文件夹

  • Spark实战part10

    • 1.简单的回顾
    • 2.sparkstream的介绍
    • 3Spark Streaming基本工作原理
    • 4.spark_streaming单词统计
    • 5输入DStream之基础数据源
    • 6sparkstream读取HDFS中的数据
    • 7sparkstream读取kafka数据
    • 8sparkstream读取kafka数据_direct方式
    • 9updateStateByKey统计所以单词

  • Spark实战part11

    • 1.sparkstreaming滑动窗口讲解
    • 2.滑块统计最高搜索单词
    • 3.公司业务流程介绍
    • 4.手机项目流程
    • 5.html简单介绍
    • 6.简单介绍一下跨平台开发
    • 7php和手机业务的介绍
    • 8生成数据方式
    • 9.简单分析一下业务流程
    • 1
    • 1
0/1024
暂无留言

    订阅失败

    大数据Spark实战视频教程
    大数据Spark实战视频教程 ...

    订阅列表已满，请先移出部分订阅内容。

    当前章节需购买后观看
    开通超级会员免费看！专家精选系列课程，满足你从入门到精通！更有问答月卡免费送，你的问题有问必答！

    购买课程

    扫码完成付费，可继续学习全部课程内容

    加载中...
    正在试验
    后自动删除环境
    课程实验
    本次实验时间已到期 00:00:00
    程序员研修院 v1.1.0
    一、播放器优化
    修改播放器默认倍速设置，增加1.25倍速
    调整目录展示形式，增加折叠/展开
    优化播放器的使用体验，有播放问题可以点击播放页内的”反馈“提交问题
    查看全部版本记录
    课件正在飞速打包中，请耐心等待几秒钟～