Alluxio系列Meetup——Spark+Alluxio:面向K8s的数据本地性优化与中国联通大数据系统案例分析
2020/05/23 20:00 - 21:00
活动形式
研讨会直播
活动内容
Talk I: Alluxio在中国联通的实践
讲师介绍:
Talk II : Spark + Alluxio在K8s平台上的数据本地性
Alluxio用缓存的方式,将数据带到计算端,通过更好的数据本地性提升计算效率。随着更多人将服务迁移到云端的容器中并使用K8s来进行容器编排,新的技术、框架和设计理念也给数据本地性带来了新的挑战。Alluxio针对用户在K8s上的不同使用场景,提供了不同的数据本地化解决方案。这个分享将从Spark+Alluxio在非K8s环境下如何实现数据本地性出发,深入介绍Spark+Alluxio如何在K8s环境下实现同样的数据本地性,最后介绍针对不同使用场景的两种解决方案。