中仕学社新版首页
特岗教师国家公务员公务员面试教师资格证面试英语四六级MBA/MPA精品推荐

您已连续签到…天，立即签到

  • 5

    积分

    第1天

  • 10

    积分

    第2天

  • 20

    积分

    第3天

  • 30

    积分

    第4天

  • 50

    积分

    第5天

  • 100

    积分

    第6天

  • 200

    积分

    第7天

连续签到30天额外500积分奖励哦！

连续签到进度

1天

100积分

额外奖励

7天

200积分

额外奖励

15天

500积分

额外奖励

30天

个人中心

学习中心

分享中心

购买记录

    三天内
    一周内
    一个月内
    六个月内
    一年内
    一年前

学习记录

加载更多

我的收藏

加载更多

课程征订

    账户信息

    • 最新消息

    扫描二维码

    • 中仕学社手机app（安卓版）

      下载手机app，随时随地学习

    • 微信公众号:全民学习社

      关注微信有惊喜，赚钱就是这么简单

    • 导游考试通app（安卓版）

      下载手机app，下证就是这么简单

    • 中仕学社手机web（网页）版

      使用手机浏览器就能随时随地学习

    帮助中心

    新手指南
    如何注册
    如何登陆
    修改密码
    关于推荐码
    关于我们
    激活邮件
    积分学币
    什么是积分
    什么是学币
    获取积分
    积分兑换
    学习中心
    购买课程
    支付方式
    学习疑问
    课程更新
    上传视频
    如何上传视频
    上传流程
    传课收益
    关于珍课阁
    上传文章
    上传文章流程

    客服中心

    中仕学社 > 视频学习 > 大数据平台核心技术

    使用 中仕手机版

    扫一扫学习本课程

    大数据平台核心技术
    积分不够？ 立即查看『积分获取秘籍』
    课时：82 课时
    价格：￥00 元
    课程免费学？还能挣“工资”？快来参与！
    免费试听
    购买学习
    登录后即可免费试听
    加载中...
    10分
    画质清晰度:
    10分
    音质清晰度:
    10分
    内容讲解项:
    10分
    互动解答项:
    10分
    那些学习此课程的童鞋们
    同类课程推荐

    看不见的成绩单

    大学生活导论

    大学生之毕业论文定制与辅导

    PPT设计秘笈

    大学生职业素养提升

    课程简介

    面向信息科学技术类研究生或高年级本科生，主要由业界一线研发人员讲授大数据平台涉及到的分布式系统构架、分布式编程、分布式流处理、分布式数据存储管理、内存计算支持等内容，通过实践，力图覆盖大数据处理平台的主要核心技术，帮助学生了解分布式大数据平台设计中的关键挑战，提出实际的解决方案，为研究生未来研究方向提供参考。课程重点讲解设计原理，突出技术深度和实战性。参考资料《ODPS权威指南》
    （注：本课已更新完毕，欢迎加入大学生学习交流群215677965）

    课程目录

    • 第1节 ---- 1.1主讲人：武永卫
    • 第2节 ---- 1.2主讲人：程永
    • 第3节 ---- 2.1大纲
    • 第4节 ---- 2.2初步认识大数据对分布式存储系统的需求
    • 第5节 ---- 2.3理解大数据对分布式存储系统的需求
    • 第6节 ---- 2.4具体说明大数据对分布式存储系统的需求
    • 第7节 ---- 2.5大规模分布式存储的挑战
    • 第8节 ---- 2.6小概率事件-Raid卡故障
    • 第9节 ---- 2.7分布式存储系统举例
    • 第10节 ---- 2.8分布式存储系统重要功能设计要点剖析
    • 第11节 ---- 2.9链式写正常流程
    • 第12节 ---- 2.10写流程的另一种常见方式：主从模式
    • 第13节 ---- 2.11链式写异常流程
    • 第14节 ---- 2.12写异常处理的另一种方法-Seal and New
    • 第15节 ---- 2.13读正常流程
    • 第16节 ---- 2.14读流程优化-BackupRead
    • 第17节 ---- 2.15 IO QoS
    • 第18节 ---- 2.16数据正确性：checksum
    • 第19节 ---- 2.17数据可靠性-Replication
    • 第20节 ---- 2.18数据均衡-Rebalance
    • 第21节 ---- 2.19垃圾回收-Garbage collection
    • 第22节 ---- 2.20 Erasure coding
    • 第23节 ---- 2.21 Erasure coding（3,2）写入和读取过程
    • 第24节 ---- 2.22元数据管理的高可用性和可扩展性
    • 第25节 ---- 2.22元数据管理的高可用性和可扩展性
    • 第26节 ---- 2.23元数据管理的高可用性
    • 第27节 ---- 2.24 Paxos概要
    • 第28节 ---- 2.25 Raft
    • 第29节 ---- 2.26元数据管理的可扩展性
    • 第30节 ---- 2.27盘古混合存储
    • 第31节 ---- 3.1阿里云飞天分布式调度
    • 第32节 ---- 3.2任务调度
    • 第33节 ---- 3.3资源调度
    • 第34节 ---- 3.4容错机制
    • 第35节 ---- 3.5规模挑战
    • 第36节 ---- 3.6安全域性能隔离
    • 第37节 ---- 3.6安全域性能隔离
    • 第38节 ---- 3.7分布式调度的发展方向
    • 第39节 ---- 4.1数据格式和抽象
    • 第40节 ---- 4.2分布式编程模型
    • 第41节 ---- 4.3 MapReuduce编程模型
    • 第42节 ---- 4.4关系型数据编程模型
    • 第43节 ---- 4.5分布式图计算模型
    • 第44节 ---- 4.6分布式编程未来展望
    • 第45节 ---- 实验1 分布式事务（1）
    • 第46节 ---- 实验1 分布式一致性算法（2）
    • 第47节 ---- 实验1 两阶段提交与三阶段提交（3）
    • 第48节 ---- 实验1 实践-介绍（4）
    • 第49节 ---- 5.1关系型计算基本原理_1
    • 第50节 ---- 5.1关系型计算基本原理_1
    • 第51节 ---- 5.2关系型计算基本原理_2
    • 第52节 ---- 5.2关系型计算基本原理_2
    • 第53节 ---- 5.3分布式环境中的连接计算和聚合计算
    • 第54节 ---- 5.3分布式环境中的连接计算和聚合计算
    • 第55节 ---- 5.4其他计算和物理优化
    • 第56节 ---- 6.1提纲
    • 第57节 ---- 6.2课程背景介绍
    • 第58节 ---- 6.3前序知识
    • 第59节 ---- 6.4分布式节点距离计算法则
    • 第60节 ---- 6.5数据分布策略
    • 第61节 ---- 6.6分布式计算调度
    • 第62节 ---- 6.7数据就近原则计算如何容错
    • 第63节 ---- 6.8 ODPS跨集群数据依赖
    • 第64节 ---- 实验2 主讲人：谢德军
    • 第65节 ---- 7.1增量计算和流式计算
    • 第66节 ---- 7.2与批量计算的区别
    • 第67节 ---- 7.3业界典型系统技术概要分析
    • 第68节 ---- 7.4核心技术
    • 第69节 ---- 7.5消息机制
    • 第70节 ---- 7.6有状态计算、并行DAG、抢占式调度和资源隔离、Failover机制
    • 第71节 ---- 7.7 StreamSQL
    • 第72节 ---- 8.1软硬件趋势、分布式计算简史与内存计算
    • 第73节 ---- 8.2分布式计算
    • 第74节 ---- 8.3内存计算
    • 第75节 ---- 8.3内存计算
    • 第76节 ---- 8.4统一的计算框架
    • 第77节 ---- 8.5业界经典系统技术分析-spark&flink
    • 第78节 ---- 9.1主讲人：褚葳
    • 第79节 ---- 实验3.分布式环境下的新问题（1）
    • 第80节 ---- 实验3.工程实现范例（2）
    • 第81节 ---- 实验3.工程实现范例（2）
    • 第82节 ---- 实验3.课程设计相关问题（3）

    课程讲义

    • 讲义附件-1 ---- 第一讲_大数据处理平台概述_武永卫_
    • 讲义附件-2 ---- 第一讲_大数据平台ODPS_程永_
    • 讲义附件-3 ---- 第二讲_分布式存储_姚文辉_
    • 讲义附件-4 ---- 第三讲_资源管理与任务调度_陶阳宇_
    • 讲义附件-5 ---- 第四讲_分布式编程模型的设计与演化_吴威_
    • 讲义附件-6 ---- 第五讲_离线分布式关系型计算_王鹏飞_
    • 讲义附件-7 ---- 第六讲_全局数据管理与调度_罗李_
    • 讲义附件-8 ---- 第七讲_流式计算的系统设计和实现_强琦_
    • 讲义附件-9 ---- 第八讲_内存计算_强琦_
    • 讲义附件-10 ---- 第九讲_大规模数据的分布式机器学习平台_褚葳_
    • 讲义附件-11 ---- 实践1_通过两阶段提交协议完成数据上传_冯骁_
    • 讲义附件-12 ---- 实践2_编写MR完成Group_By_Join操作_谢德军_
    • 讲义附件-13 ---- 实践3_实现MapReduce编程运行时库_徐冬_

    课程评论

    300/300 文明学习 理性评论 首评课程您可获得 10 积分提交评论
    • 还没有童鞋来评价该课程，赶紧来抢沙发！！

    课程答疑

    主讲老师看到您提交的问题将会给您回复，您可从个人中心查询。300/300
    1. 新手指南
      1. 如何注册
      2. 如何登陆
      3. 修改密码
      4. 关于推荐码
      5. 关于我们
    2. 积分学币
      1. 什么是积分
      2. 什么是学币
      3. 获取积分
      4. 积分兑换
      5. 兑换礼品
    3. 学习中心
      1. 购买课程
      2. 支付方式
      3. 学习疑问
      4. 课程更新
      5. 课程保障
    4. 传课中心
      1. 如何传课
      2. 传课流程
      3. 传课收益
      4. 关于珍课阁

    联系电话

    400-9988-721

    E-mail

    service@chinaplat.com

    中仕学社全体老师期待您的加入

    关于中仕学社 助力职业梦想 | 帮助中心 | 支付方式 | 联系我们

    Copyright © 2014-2024 中仕学社 助力职业梦想 jswljy.com 版权所有 | 备案号 冀ICP备14019694号-3