请选择 进入手机版 | 继续访问电脑版

我要励志,励志私塾学堂

精华推荐
查看: 122|回复: 0

《Spark 1.X 大数据平台V2》11月开班[完整版附课件] [复制链接]

Rank: 5Rank: 5

发表于 2017-11-16 22:35:44 |显示全部楼层 | @该作者
130909gigdiiig059l6fl9.jpg


第一周 Spark生态系统概述与编程模型
•    Spark生态系统概述
•    回顾Hadoop MapReduce
•    Spark运行模式
•    RDD
•    Spark运行时模型简介
•    缓存策略介绍
•    transformation
•    action
•    lineage
•    容错处理
•    宽依赖与窄依赖
•    集群配置

第二周 深入Spark内核
•    Spark术语解释
•    集群概览
•    核心组件
•    数据本地性
•    常用RDD
•    任务调度
•    DAGScheduler
•    TaskScheduler
•    Task细节
•    广播变量
•    累加器
•    性能调优

第三周 Spark on Yarn & Spark as a service
•    Spark on Yarn原理
•    Spark on Yarn实践
•    JobServer架构
•    JobServer API介绍
•    JobServer配置与部署

第四周 Spark Streaming原理与实践
•    DStream
•    数据源
•    无状态transformation与有状态transformation
•    checkpoint
•    容错
•    性能优化

第五周 Shark与Spark SQL
•    Shark数据模型
•    Shark数据类型
•    Shark架构
•    Shark部署
•    缓存(分区)表
•    SharkServer
•    Shark与Spark结合
•    Spark SQL架构
•    Parquet支持
•    DSL
•    SQL on RDD
•    Hive支持
•    UDF
•    JDBC Server

第六周 Machine Learning on Spark
•    LinearRegression
•    K-Means
•    Collaborative Filtering

第七周 Spark多语言编程
•    Python简介
•    PySpark API
•    使用Python编写Spark程序
•    Spark with Java

第八周 图计算GraphX
•    现存的图计算框架
•    Table Operators
•    Graph Operators
•    GraphX设计

第九周 Tachyon原理与实践
•    Tachyon原理与架构
•    Tachyon实践

第十周 SparkR
•    SparkR原理介绍
•    安装配置与运行

下载地址:
游客,如果您要查看本帖隐藏内容请回复

主题: Spark、 SQL、 数据、 Hadoop、 Hive、 MapReduce、 Java、 大数据、 Python、 变量、
Tags: #8226,Spark,Shark,url,transformation,JobServer,Yarn,RDD,SQL,Tachyon,架构,原理,hide,com

51lizhi - 我要励志 - 励志私塾课堂
论坛版权
1、励志私塾课堂为非营利性网站,全站所有资料仅供网友个人学习使用,禁止商用
2、本站所有文档、视频、书籍等资料均由网友分享,本站只负责收集不承担任何技术及版权问题
3、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除下载链接并致以最深的歉意
4、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
5、一经注册为本站会员,一律视为同意网站规定,本站管理员及版主有权禁止违规用户
6、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和励志私塾课堂的同意
7、励志私塾课堂管理员和版主有权不事先通知发贴者而删除本文

加入私塾课堂联系QQ:3072242466

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

Archiver|手机版|我要励志,励志私塾学堂

GMT+8, 2018-4-25 10:39 , Processed in 0.336930 second(s), 13 queries , Memcache On.

Powered by Discuz! X2

© 2001-2011 Comsenz Inc.

回顶部