请选择 进入手机版 | 继续访问电脑版

以慕课网日志分析为例 进入大数据 Spark SQL 的世界

8
回复
57
查看
[复制链接]
  • TA的每日心情
    擦汗
    昨天 11:25
  • 签到天数: 280 天

    [LV.8]以坛为家I

    4586

    主题

    5557

    帖子

    75万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    754034
    发表于 2020-6-3 22:05:45 | 显示全部楼层 |阅读模式
    以慕课网日志分析为例 进入大数据 Spark SQL 的世界
    第1章 初探大数据
    本章将介绍为什么要学习大数据、如何学好大数据、如何快速转型大数据岗位、本项目实战课程的内容安排、本项目实战课程的前置内容介绍、开发环境介绍。同时为大家介绍项目中涉及的Hadoop、Hive相关的知识
    第2章 Spark及其生态圈概述
    Spark作为近几年最火爆的大数据处理技术,是成为大数据工程师必备的技能之一。本章将从如下几个方面对Spark进行一个宏观上的介绍:Spark产生背景、特点、发展史、Databricks官方调查结果、Spark与Hadoop的对比、Spark开发语言及运行模式介绍 ...
    第3章 实战环境搭建
    工欲善其事必先利其器,本章讲述Spark源码编译、Spark Local模式运行、Spark Standalone模式运行
    第4章 Spark SQL概述
    Spark SQL面世已来,它不仅接过了Shark的接力棒,继续为Spark用户提供高性能SQL on Hadoop解决方案,还为Spark带来了通用、高效、多元一体的结构化数据处理能力。本章将从Spark SQL前世今生、SQL on Hadoop框架、Spark SQL概述、愿景、架构,这几个角度进行展开讲解...
    第5章 从Hive平滑过渡到Spark SQL
    Hive是SQL-on-Hadoop的解决方案和默认的标准,如何将数据处理从Hive过渡到Spark SQL上来是我们必须要掌握的。本章我们将讲解在Spark中操作Hive中的数据几种方式
    第6章 DateFrame&Dataset
    DataFrame&Dataset是Spark2.x中最核心的编程对象,Spark2.x中的子框架能够使用DataFrame或Dataset来进行数据的交互操作。本章将从DataFrame的产生背景、DataFrame对比RDD、DataFrame API操作等方面对DataFrame做详细的编程开发讲解
    第7章 External Data Source
    Spark SQL中的核心功能,可以使用外部数据源非常方便的对存储在不同系统上的不同格式的数据进行操作。本章将讲解如何使用外部数据源来操作Hive、Parquet、MySQL中的数据以及综合使用
    第8章 SparkSQL愿景
    本章将讲解Spark的愿景:写更少的代码、读更少的数据、让优化器自动优化程序
    第9章 慕课网日志实战
    本章使用Spark SQL对慕课网主站的访问日志进行各个维度的统计分析操作,涉及到的过程有:数据清洗、数据统计、统计结果入库、数据的可视化、调优及Spark on YARN。通过本实战项目将Spark SQL中的知识点融会贯通,达到举一反三的效果
    第10章 Spark SQL扩展和总结
    本章将列举Spark SQL在工作中经常用到的方方方面的总结

    游客,如果您要查看本帖隐藏内容请回复



    回复

    使用道具 举报

  • TA的每日心情
    郁闷
    6 天前
  • 签到天数: 127 天

    [LV.7]常住居民III

    4

    主题

    445

    帖子

    6537

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    6537
    发表于 2020-6-4 09:07:51 | 显示全部楼层
    以慕课网日志分析为例 进入大数据 Spark SQL 的世界
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    难过
    2020-8-30 22:43
  • 签到天数: 30 天

    [LV.5]常住居民I

    3

    主题

    253

    帖子

    3431

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    3431
    发表于 2020-6-5 15:50:42 | 显示全部楼层
    222222222222222222222222222
    回复 支持 反对

    使用道具 举报

  • TA的每日心情

    2020-9-12 18:38
  • 签到天数: 33 天

    [LV.5]常住居民I

    0

    主题

    105

    帖子

    2971

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    2971
    发表于 2020-6-7 10:25:18 | 显示全部楼层
    Spark SQL在工作中经常用到的方方方面的总结
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    3 天前
  • 签到天数: 12 天

    [LV.3]偶尔看看II

    2

    主题

    49

    帖子

    2376

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    2376
    发表于 2020-6-10 09:31:53 | 显示全部楼层
    以慕课网日志分析为例 进入大数据 Spark SQL 的世界
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    擦汗
    2020-7-28 10:11
  • 签到天数: 31 天

    [LV.5]常住居民I

    1

    主题

    83

    帖子

    2099

    积分

    年费会员

    Rank: 4

    积分
    2099
    发表于 2020-6-10 19:06:06 | 显示全部楼层
    Spark SQL的总结
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    开心
    昨天 20:28
  • 签到天数: 50 天

    [LV.5]常住居民I

    4

    主题

    140

    帖子

    5681

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    5681
    发表于 2020-6-11 16:08:01 | 显示全部楼层
    6666666666666666
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    奋斗
    2020-9-17 09:04
  • 签到天数: 268 天

    [LV.8]以坛为家I

    3

    主题

    371

    帖子

    1万

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    12587
    发表于 2020-6-19 17:03:41 | 显示全部楼层
    E: 以慕课网日志分析为例 进入大数据 Spark SQL 的世界
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    郁闷
    2020-9-14 17:17
  • 签到天数: 3 天

    [LV.2]偶尔看看I

    0

    主题

    29

    帖子

    1398

    积分

    年费会员

    Rank: 4

    积分
    1398
    发表于 2020-6-20 13:03:48 | 显示全部楼层
    666666666666666666666
    回复 支持 反对

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    学习课程!一站搞定!
    学途无忧VIP会员群

    973849140

    周一至周日9:00-23:00

    反馈建议

    169371168@qq.com 在线QQ咨询

    扫描二维码关注我们

    学途无忧!为学习谋坦途,为会员谋福利!|网站地图