2017年大数据平台核心技术

george · 发表于 2018-6-18 00:29:00

2017年大数据平台核心技术

├─实践1：通过两阶段提交协议完成数据上传
│    5.1.1 分布式事务 .mp4
│    5.2.1 分布式一致性算法.mp4
│    5.3.1 两阶段提交与三阶段提交.mp4
│    5.4.1 实践--介绍.mp4
│
├─实践2：编写MR完成Group By+Join操作
│    8.1.1 实践2：编写MR完成Group By+Join操作.mp4
│
├─实践3：实现MapReduce编程运行时库
│    12.1.1 分布式环境下的新问题.mp4
│    12.2.1 工程实现范例.mp4
│    12.3.1 课程设计相关问题.mp4
│
├─第一讲大数据和ODPS
│    1.1.1 大数据处理平台概述.mp4
│    1.2.1 大数据平台ODPS.mp4
│
├─第七讲流式计算的系统设计与实现
│    9.1.1 流式计算的系统设计与实现.mp4
│    9.2.1 与批量计算的区别.mp4
│    9.3.1 业界典型系统技术概要分析.mp4
│    9.4.1 核心技术.mp4
│    9.5.1 消息机制.mp4
│    9.6.1 有状态计算、并行DAG、抢占式调度和资源隔离、Failover机制.mp4
│    9.7.1 StreamSQL.mp4
│
├─第三讲资源管理与任务调度
│    3.1.1 阿里云飞天分布式调度.mp4
│    3.2.1 任务调度.mp4
│    3.3.1 资源调度.mp4
│    3.4.1 容错机制.mp4
│    3.5.1 规模挑战 .mp4
│    3.6.1 安全域性能隔离.mp4
│    3.7.1 分布式调度的发展方向.mp4
│
├─第九讲大规模数据的分布式机器学习平台
│    11.1.1 大规模数据的分布式机器学习平台.mp4
│
├─第二讲分布式存储
│    2.1.1 大纲.mp4
│    2.10.1 写流程的另一种常见方式：主从模式.mp4
│    2.11.1 链式写异常流程.mp4
│    2.12.1 写异常处理的另一种方法-Seal and New.mp4
│    2.13.1 读正常流程.mp4
│    2.14.1 读流程优化-BackupRead.mp4
│    2.15.1 IO QoS.mp4
│    2.16.1 数据正确性：checksum.mp4
│    2.17.1 数据可靠性-Replication.mp4
│    2.18.1 数据均衡-Rebalance.mp4
│    2.19.1 垃圾回收-Garbage collection.mp4
│    2.2.1 初步认识大数据对分布式存储系统的需求.mp4
│    2.20.1 Erasure coding.mp4
│    2.21.1 Erasure coding（3,2）写入和读取过程.mp4
│    2.22.1 元数据管理的高可用性和可扩展性.mp4
│    2.23.1 元数据管理的高可用性.mp4
│    2.24.1 Paxos概要.mp4
│    2.25.1 Raft.mp4
│    2.26.1 元数据管理的可扩展性.mp4
│    2.27.1 不同存储介质的特性.mp4
│    2.28.1 盘古混合存储.mp4
│    2.3.1 理解大数据对分布式存储系统的需求.mp4
│    2.4.1 具体说明大数据对分布式存储系统的需求.mp4
│    2.5.1 大规模分布式存储的挑战.mp4
│    2.6.1 小概率事件-Raid卡故障.mp4
│    2.7.1 分布式存储系统举例.mp4
│    2.8.1 分布式存储系统重要功能设计要点剖析.mp4
│    2.9.1 链式写正常流程.mp4
│
├─第五讲离线分布式关系型计算
│    6.1.1 离线分布式关系型计算_1.mp4
│    6.2.1 关系型计算基本原理_2.mp4
│    6.3.1 分布式环境中的连接计算和聚合计算.mp4
│    6.4.1 其他计算和物理优化.mp4
│
├─第八讲内存计算
│    10.1.1 软硬件趋势、分布式计算简史与内存计算.mp4
│    10.2.1 分布式计算.mp4
│    10.3.1 内存计算.mp4
│    10.4.1 统一的计算框架.mp4
│    10.5.1 业界经典系统技术分析-spark&flink.mp4
│
├─第六讲全局数据管理与调度
│    7.1.1 提纲.mp4
│    7.2.1 课程背景介绍.mp4
│    7.3.1 前序知识.mp4
│    7.4.1 分布式节点距离计算法则.mp4
│    7.5.1 数据分布策略.mp4
│    7.6.1 分布式计算调度.mp4
│    7.7.1 数据就近原则计算如何容错.mp4
│    7.8.1 ODPS跨集群数据依赖.mp4
│
└─第四讲分布式编程模型的设计与演化
      4.1.1 数据格式和抽象.mp4
      4.2.1 分布式编程模型.mp4
      4.3.1 MapReuduce编程模型.mp4
      4.4.1 关系型数据编程模型.mp4
      4.5.1 分布式图计算模型.mp4
      4.6.1 分布式编程未来展望.mp4