vlambda博客
学习文章列表

大数据时代，上云已成为越来越多终端客户大数据方案的落地选择，阿里云EMR以其易用性高，性能强，弹性大的特点，成为了广大用户的首选。英特尔®傲腾™持久内存是兼 具出色的内存与存储性能的解决方案，将高性价比的大容量内存与对数据持久性的支持巧妙地结合在一起。

本题结合阿里云EMR和英特尔®傲腾™数据中心级持久内存，以及Intel OAP软件包，优化软件系统和利用硬件的特征，追求TPC-DS测试集的最优性能。

赛题说明！

# 初赛

EMR团队提供用于比赛的Spark 3.1.2代码分支，选手进行 Spark 代码优化和参数调优以提升SparkSQL执行效率，同时组委会提供性能测评工具供选手自行测试（单机环境或EMR集群环境）。在比赛阶段，选手将最终优化后的Spark代码和调优参数打包，通过天池平台提交，天池平台会使用相同的性能测评工具，进行评测和排名。初赛测评环境的 EMR 集群配置参考“初赛测评环境软硬件配置”。

# 复赛

在初赛的基础上，复赛需要处理的数据量更大，同时升级了 EMR 集群配置，并为每个Worker 节点配置了 PMEM持久内存，选手可以通过 App Direct 模式使用持久内存。复赛测评环境的 EMR 集群配置参考“复赛测评环境软硬件配置”。

云上推荐达人：报名期间（7月5日-9月21日），点击赛制页面邀请参赛按钮，获取专属邀请海报并分享给好友，好友报名成功后即可获得20张粮票。本次比赛拉新总奖金池共计五万张粮票，粮票计算规则为10：1。

专属活动 “EMR开发者激励计划”

1、云上冲榜达人：初赛期间（7月27日-9月23日），提交出分上榜后即可参与冲榜达人评选。根据9月24日晚20点排行结果，排名TOP30队伍成为云上冲榜达人，每队将获得EMR定制雨伞1个+比赛定制T恤1件。

2、云上进阶达人：复赛期间（9月27日-10月29日），提交出分上榜后即可参与进阶达人评选。根据10月29日晚20点排行结果，排名TOP10队伍成为云上进阶达人，每队将获得EMR定制双肩包1个。

3、云上分享达人：活动期间（7月5日-10月29日），报名EMR极客挑战赛并在论坛发布提分攻略，关联到挑战赛。即可参与云上分享达人奖项评选，获赞最多的帖子发布者获胜，将获得EMR大礼包1套（EMR定制雨伞+双肩包+T恤）。

*本次活动最终解释权归阿里云所有。禁止一切违规刷赞等作弊行为

校招/实习/就业干货等信息！

欢迎关注小众自媒体职场品牌

“JobInfo”