请选择 进入手机版 | 继续访问电脑版

Spark + ElasticSearch 构建电商用户标签系统实现精准营销 完整版

152
回复
2879
查看
  [复制链接]
  • TA的每日心情
    奋斗
    2020-10-11 16:43
  • 签到天数: 282 天

    [LV.8]以坛为家I

    4601

    主题

    5573

    帖子

    76万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    765330
    发表于 2019-12-30 23:02:39 | 显示全部楼层 |阅读模式
    8.jpg
    第1章 课程介绍与学习指南
    本章中将向大家介绍课程能学到什么、解决什么实际问题、项目成果展示,课程整体安排以及如何学习更高效。

    第2章 开发环境与技术栈介绍
    本章主要针对课程中应用的开发环境以及技术栈进行相关介绍。本课中会使用,虚拟化技术: virtualbox + vagrant,容器化技术:docker + docker-compose。技术栈涉及spark,Hadoop,hive等。

    第3章 大数据环境搭建
    本章主要讲解开发环境的搭建,虚拟机与docker的安装。针对没有docker基础的同学,我们也会涵盖部分基础知识,从而实现轻松上手。针对容器化的开发环境,我们会详细演示,如何去解决访问和数据持久化。本次环境搭建会配合详细操作文档,方便同学们本地复现。...

    第4章 itag用户标签系统介绍
    相较于现有业务的局限性,这章中我们会来共同来探讨标签系统的设计理念。通过UI初步讲解标签的数据含义,结合mysql数据库表结构,去理解业务和标签的实现算法,更为详细的标签算法及ETL清洗逻辑在后续章节会做详细讲解。...

    第5章 数据同步
    针对数据同步技术,本章中会介绍一些常用的数据同步中间件,以及实际项目中数据库同步至大数据集群的架构迭代(画图)。随后会演示利用sqoop导入数据到hive中。并学习如何对hive进行实际操作。

    第6章 数据清洗
    本章中主要讲解大数据项目中数据与业务的关系,数据血缘,数据平台,数仓等相关概念。讲解如何利用spark进行数据操作。分别从spark java,spark scala以及spark sql 三种不同实现方式进行代码演示与对比。

    第7章 指标算法及标签ETL
    本章中将根据产品文档,利用spark sql + spark scala 的方式实现标签ETL。会讲述ES mapping 的设计,演示如何利用spark操作ES,并最终对全流程数据做验证与复盘。

    第8章 itag UI
    本章中将介绍如何应用springboot + vue 实现项目的前端UI。用户选择特定标签后,ES背后的查询逻辑。对于查询的结果,标签清洗结果,数据库原始结果做一个验证。并最终将UI项目通过docker容器的方式部署起来。

    第9章 课程总结
    本章会进行课程回顾与总结,再次圈重点,敲黑板。并对后续的一个学习线路做规划。
    游客,如果您要查看本帖隐藏内容请回复

    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    前天 13:35
  • 签到天数: 97 天

    [LV.6]常住居民II

    3

    主题

    249

    帖子

    4853

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    4853
    发表于 2019-12-31 01:24:59 | 显示全部楼层
    RE: Spark + ElasticSearch 构建电商用户标签系统实现精准营销 [修改]
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    2020-9-23 09:11
  • 签到天数: 44 天

    [LV.5]常住居民I

    1

    主题

    75

    帖子

    2598

    积分

    年费会员

    Rank: 4

    积分
    2598
    发表于 2019-12-31 09:43:50 | 显示全部楼层
    ASDASDASDSADSADASD
    回复 支持 反对

    使用道具 举报

  • TA的每日心情
    慵懒
    2020-9-7 23:28
  • 签到天数: 367 天

    [LV.9]以坛为家II

    18

    主题

    592

    帖子

    1万

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    12976
    发表于 2019-12-31 09:51:44 | 显示全部楼层
    感谢分享
    回复

    使用道具 举报

  • TA的每日心情
    郁闷
    昨天 14:02
  • 签到天数: 257 天

    [LV.8]以坛为家I

    5

    主题

    410

    帖子

    8973

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    8973
    发表于 2020-1-1 21:09:06 | 显示全部楼层
    感谢分享
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2 小时前
  • 签到天数: 131 天

    [LV.7]常住居民III

    3

    主题

    368

    帖子

    6187

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    6187
    发表于 2020-1-2 00:39:19 | 显示全部楼层
    不错。。。。。。。。。。。。。。。。。
    回复

    使用道具 举报

  • TA的每日心情
    郁闷
    2020-9-14 14:17
  • 签到天数: 41 天

    [LV.5]常住居民I

    3

    主题

    81

    帖子

    3188

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    3188
    发表于 2020-1-2 14:40:58 | 显示全部楼层
    感谢分享
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2020-2-18 14:51
  • 签到天数: 14 天

    [LV.3]偶尔看看II

    2

    主题

    44

    帖子

    2844

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    2844
    发表于 2020-1-3 15:39:57 | 显示全部楼层

    感谢分享
    回复

    使用道具 举报

  • TA的每日心情
    难过
    3 天前
  • 签到天数: 208 天

    [LV.7]常住居民III

    3

    主题

    333

    帖子

    1万

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    17510
    发表于 2020-1-4 08:42:22 | 显示全部楼层
    感谢分享
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2020-8-25 00:42
  • 签到天数: 53 天

    [LV.5]常住居民I

    2

    主题

    136

    帖子

    3780

    积分

    终身会员

    Rank: 6Rank: 6

    积分
    3780
    发表于 2020-1-5 01:01:00 | 显示全部楼层
    时间的看法斯柯达副驾驶的f
    回复 支持 反对

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    学习课程!一站搞定!
    学途无忧VIP会员群

    973849140

    周一至周日9:00-23:00

    反馈建议

    169371168@qq.com 在线QQ咨询

    扫描二维码关注我们

    学途无忧!为学习谋坦途,为会员谋福利!|网站地图