欢迎关注Hadoop、Spark、Flink、Hive、Hbase、Flume等大数据资料分享微信公共账号:iteblog_hadoop
  1. 文章总数:977
  2. 浏览总数:11,945,371
  3. 评论:3936
  4. 分类目录:106 个
  5. 注册用户数:6113
  6. 最后更新:2018年12月13日
过往记忆博客公众号iteblog_hadoop
欢迎关注微信公众号:
iteblog_hadoop
大数据技术博客公众号bigdata_ai
大数据猿:
bigdata_ai

上海Spark Meetup第十一次聚会

  Shanghai Apache Spark Meetup第十一次聚会,将于12月10日,举办于上海大连路688号宝地广场22楼小沃科技活动场地。靠近地铁4号线和12号线的大连路站。本次会议得到中国联通小沃科技的大力支持。欢迎大家前来参加!

会议主题

1、演讲主题:《Spark Streaming构建实时系统介绍》
演讲嘉宾:程然,小沃科技高级架构师,开源爱好者,曾就职于IBM, 交行信用卡中心等,经历过多个金融,电商大数据平台建设和应用。
主题简介:Spark Streaming构建实时系统介绍,分享实时系统实践的经验教训。

2、演讲主题:《使用Apache Commons Crypto构建高性能安全的Spark》
演讲嘉宾:徐铖, 英特尔大数据部门软件工程师,主要专注于SQL on Hadoop和大数据安全领域,是Apache Spark, Apache Commons Crypto代码贡献者,Apache Hive Committer。
主题简介:运行Spark计算任务的时候,被处理的数据往往会含有敏感信息。而使用者并不希望这些敏感数据被其他用户访问到。因此数据在计算和传输过程中的安全性变得越来越重要,特别是对企业级别用户。对应到Spark计算引擎主要涉及到两部分安全性,一部分是网络传输的数据(network encryption),另一部分是写到磁盘的中间结果(file encryption)。同时Spark作为一个计算框架,为了实现安全性还要尽可能减少对性能的损耗。在我们这次技术分享中,我们将会介绍使用Apache Commons Crypto来设计和实现这两部分高性能加密功能,并提供相关的性能数据。

3、演讲主题:《MPI到Spark迁移实践:Relion-Spark》
演讲嘉宾:Vincent Xie (谢巍盛), 英特尔大数据部门软件工程师, 主要负责 ML/MLLIB (machine learning) on Spark 的相关工作, 覆盖了针对外部客户的MLLIB up-streaming 和machine learning 相关的项目。
主题简介:主要介绍本人所在团队围绕RELLION 做的一些工作。Rellion基本可以认为是蛋白质结构重建的标准,是近年来很受欢迎的生物学研究课题。我们把基于MPI的Rellion迁移到Spark上。在目前这个早期阶段,试验结果显示了巨大的性能提升,更快、更可靠和更健壮。我们将分享详细的工作流程,并讨论未来工作的各种可能性。

4、演讲主题:《Spark on Mesos的实践》
演讲嘉宾:孙锐,同盾科技大数据高级专家,开源爱好者,spark/hive贡献者,前英特尔大数据团队成员。在底层系统软件方面亦有多年经验。
主题简介:Spark on Mesos介绍,分享Spark on Mesos实践的经验教训。

日程表

12月10日下午
12:30 – 13:00 签到,签署,进入会场 / sign in, entry
13:00 – 13:15 主题发言 / Keynote
13:15 – 13:55 技术演讲 / session - 《Spark Streaming构建实时系统介绍》
13:55 – 14:35 技术演讲 / session - 《使用Apache Commons Crypto构建高性能安全的Spark》
14:35 – 14:55 茶歇 / Tea Break
14:55 – 15:35 技术演讲 / session - 《MPI到Spark迁移实践:Relion-Spark》
15:35 – 16:15 技术演讲 / session - 《Spark on Mesos的实践》
16:15 – 16:45 活动收尾及社交/Ending and Social

地图与交通信息

上海大连路688号宝地广场22楼小沃科技活动场地,靠近地铁4号线和12号线的大连路站。

报名地址

http://huiyi.csdn.net/activity/product/goods_list?project_id=3320

本博客文章除特别声明,全部都是原创!
转载本文请加上:转载自过往记忆(https://www.iteblog.com/)
本文链接: 【上海Spark Meetup第十一次聚会】(https://www.iteblog.com/archives/1897.html)
喜欢 (5)
分享 (0)
发表我的评论
取消评论

表情
本博客评论系统带有自动识别垃圾评论功能,请写一些有意义的评论,谢谢!