Spark作为目前最流行的大数据处理框架,在机器学习场景以及推荐系统中应用非常广泛。第四范式基于LLVM优化了Spark离线计算引擎,支持刚发布的Spark 3,在功能和性能上彻底解决Spark应用不能上线以及效率问题。
本期主题
本次将主要分享第四范式如何基于LLVM优化了Spark离线计算引擎。
你可以:
-了解推荐系统大规模特征工程的实现方案
-了解基于LLVM对Spark执行计划对优化
实用知识点:
-Spark / LLVM
主讲人介绍
陈迪豪
第四范式先知平台架构师,负责深度学习框架产品化以及下一代特征引擎开发工作。积极参与了开源社区TensorFlow、Kubernetes、TVM等项目开发,对分布式系统和深度学习平台有一定了解,目前专注于离线在线一致性的特征引擎开发。
课程最适合这样的你
推荐系统学院是为对推荐系统技术感兴趣的同学开设的,满足如下条件的同学最适合来学习:
如果你想要提高能力,升职加薪
想要提升自己的专业技术能力,必须从培养解决核心问题能力开始,我们不整虚的,都是干货,一个小时下来必须让你有所收获。
如果你想要实现自我价值和自我提升
“码出未来”不是一句空话,人工智能技术发展已经在各行各业生根发芽,以肉眼可见的速度改变人类的未来。如果你希望在推荐系统领域学习钻研,完成自我价值的实现,那么认真学习我们的课程,相信一定能加速这一天的到来。
如果你想要结交人脉,提高技术探讨深度
多与优秀的人交流,自己也会变得越来越优秀。有许多在该行业志同道合的伙伴潜伏在各大互联网公司,而你居然都不认识?来和他们一起来学习吧,结交志同道合的好友和技术专家,建立属于自己的高质量学术圈。
需要提醒的是,本期主题的专业技术性较强,更适合有一定基础的算法工程师和机器学习资深爱好者哦。如果你想要了解这个行业,也欢迎准时来直播间切磋交流。