Shanghai Apache Spark Meetup第十一次聚会,将于12月10日,举办于上海大连路688号宝地广场22楼小沃科技活动场地。靠近地铁4号线和12号线的大连路站。本次会议得到中国联通小沃科技的大力支持。欢迎大家前来参加!
会议主题
1、演讲主题:《Spark Streaming构建实时系统介绍》
演讲嘉宾:程然,小沃科技高级架构师,开源爱好者,曾就职于IBM, 交行信用卡中心等,经历过多个金融,电商大数据平台建设和应用。
主题简介:Spark Streaming构建实时系统介绍,分享实时系统实践的经验教训。
2、演讲主题:《使用Apache Commons Crypto构建高性能安全的Spark》
演讲嘉宾:徐铖, 英特尔大数据部门软件工程师,主要专注于SQL on Hadoop和大数据安全领域,是Apache Spark, Apache Commons Crypto代码贡献者,Apache Hive Committer。
主题简介:运行Spark计算任务的时候,被处理的数据往往会含有敏感信息。而使用者并不希望这些敏感数据被其他用户访问到。因此数据在计算和传输过程中的安全性变得越来越重要,特别是对企业级别用户。对应到Spark计算引擎主要涉及到两部分安全性,一部分是网络传输的数据(network encryption),另一部分是写到磁盘的中间结果(file encryption)。同时Spark作为一个计算框架,为了实现安全性还要尽可能减少对性能的损耗。在我们这次技术分享中,我们将会介绍使用Apache Commons Crypto来设计和实现这两部分高性能加密功能,并提供相关的性能数据。
3、演讲主题:《MPI到Spark迁移实践:Relion-Spark》
演讲嘉宾:Vincent Xie (谢巍盛), 英特尔大数据部门软件工程师, 主要负责 ML/MLLIB (machine learning) on Spark 的相关工作, 覆盖了针对外部客户的MLLIB up-streaming 和machine learning 相关的项目。
主题简介:主要介绍本人所在团队围绕RELLION 做的一些工作。Rellion基本可以认为是蛋白质结构重建的标准,是近年来很受欢迎的生物学研究课题。我们把基于MPI的Rellion迁移到Spark上。在目前这个早期阶段,试验结果显示了巨大的性能提升,更快、更可靠和更健壮。我们将分享详细的工作流程,并讨论未来工作的各种可能性。
4、演讲主题:《Spark on Mesos的实践》
演讲嘉宾:孙锐,同盾科技大数据高级专家,开源爱好者,spark/hive贡献者,前英特尔大数据团队成员。在底层系统软件方面亦有多年经验。
主题简介:Spark on Mesos介绍,分享Spark on Mesos实践的经验教训。
日程表
12月10日下午
12:30 – 13:00 签到,签署,进入会场 / sign in, entry
13:00 – 13:15 主题发言 / Keynote
13:15 – 13:55 技术演讲 / session - 《Spark Streaming构建实时系统介绍》
13:55 – 14:35 技术演讲 / session - 《使用Apache Commons Crypto构建高性能安全的Spark》
14:35 – 14:55 茶歇 / Tea Break
14:55 – 15:35 技术演讲 / session - 《MPI到Spark迁移实践:Relion-Spark》
15:35 – 16:15 技术演讲 / session - 《Spark on Mesos的实践》
16:15 – 16:45 活动收尾及社交/Ending and Social
地图与交通信息
上海大连路688号宝地广场22楼小沃科技活动场地,靠近地铁4号线和12号线的大连路站。
报名地址
http://huiyi.csdn.net/activity/product/goods_list?project_id=3320
本博客文章除特别声明,全部都是原创!原创文章版权归过往记忆大数据(过往记忆)所有,未经许可不得转载。
本文链接: 【上海Spark Meetup第十一次聚会】(https://www.iteblog.com/archives/1897.html)