菜鸟吧论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

QQ登录

只需一步,快速开始

微信登录

只需一步,快速开始

查看: 190162|回复: 324

2014《Spark 1.X 大数据平台V2》11月开班[完整版附课件]

  [复制链接]
admin 发表于 2016-5-14 13:55:34 | 显示全部楼层 |阅读模式
第一周 Spark生态系统概述与编程模型
•    Spark生态系统概述
•    回顾Hadoop MapReduce
•    Spark运行模式
•    RDD
•    Spark运行时模型简介
•    缓存策略介绍
•    transformation
•    action
•    lineage
•    容错处理
•    宽依赖与窄依赖
•    集群配置

第二周 深入Spark内核
•    Spark术语解释
•    集群概览
•    核心组件
•    数据本地性
•    常用RDD
•    任务调度
•    DAGScheduler
•    TaskScheduler
•    Task细节
•    广播变量
•    累加器
•    性能调优

第三周 Spark on Yarn & Spark as a service
•    Spark on Yarn原理
•    Spark on Yarn实践
•    JobServer架构
•    JobServer API介绍
•    JobServer配置与部署

第四周 Spark Streaming原理与实践
•    DStream
•    数据源
•    无状态transformation与有状态transformation
•    checkpoint
•    容错
•    性能优化

第五周 Shark与Spark SQL
•    Shark数据模型
•    Shark数据类型
•    Shark架构
•    Shark部署
•    缓存(分区)表
•    SharkServer
•    Shark与Spark结合
•    Spark SQL架构
•    Parquet支持
•    DSL
•    SQL on RDD
•    Hive支持
•    UDF
•    JDBC Server

第六周 Machine Learning on Spark
•    LinearRegression
•    K-Means
•    Collaborative Filtering

第七周 Spark多语言编程
•    Python简介
•    PySpark API
•    使用Python编写Spark程序
•    Spark with Java

第八周 图计算GraphX
•    现存的图计算框架
•    Table Operators
•    Graph Operators
•    GraphX设计

第九周 Tachyon原理与实践
•    Tachyon原理与架构
•    Tachyon实践

第十周 SparkR
•    SparkR原理介绍
•    安装配置与运行

085741w3cyozfc44pkfsyk.jpg
游客,如果您要查看本帖隐藏内容请回复

q89520 发表于 2016-5-14 13:55:36 | 显示全部楼层
大人,此事必有蹊跷!
伊可 发表于 2016-5-14 16:48:55 | 显示全部楼层
专业抢沙发的!哈哈
jin5011 发表于 2016-5-26 23:39:45 | 显示全部楼层
有空一起交流一下
midea2 发表于 2016-5-28 17:53:30 来自手机 | 显示全部楼层
垃圾内容,路过为证。
wswsq1968 发表于 2016-5-29 11:43:07 | 显示全部楼层
呵呵,低调,低调!
ladengking 发表于 2016-5-30 19:44:09 | 显示全部楼层
纯粹路过,没任何兴趣,仅仅是看在老用户份上回复一下
chbandy 发表于 2016-6-1 16:33:17 来自手机 | 显示全部楼层
sqtsqt 发表于 2016-6-7 07:23:53 | 显示全部楼层
打酱油的人拉,回复下赚取创盟币
zzy 发表于 2016-6-9 07:09:10 | 显示全部楼层
好帖必须得顶起
小杰 发表于 2016-6-14 14:46:33 | 显示全部楼层
鼎力支持!!
xuyaxiu 发表于 2016-6-18 14:41:35 来自手机 | 显示全部楼层
有空一起交流一下
sxdf 发表于 2016-6-20 13:52:23 | 显示全部楼层
ruiyu01 发表于 2016-6-21 17:46:13 | 显示全部楼层
LZ敢整点更有创意的不?兄弟们等着围观捏~
mlczhg 发表于 2016-6-22 21:32:38 来自手机 | 显示全部楼层
不错 支持下

Archiver|小黑屋|菜鸟吧论坛 ( 粤ICP备13003268-2号 )

菜鸟吧论坛网站内容全部来自互联网及网友投稿站长整理发布,如果侵犯了您的合法权益,请联系【 admin@cmzy168.com 】我们会尽快处理。

声明:本站严禁任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论!

版本支持:Discuz! X3.4 技术支持:Copyright© 2014-2019 BBS.CMZY168.COM Inc.

GMT+8, 2025-12-18 06:10 , Processed in 0.078636 second(s), 21 queries .

快速回复 返回顶部 返回列表