预告:Intel、Hulu、阿里、京东、携程等大数据实战直播

前言:由CSDN主办的SDCC 2017之大数据技术实战线上峰会将在CSDN学院举行。作为SD系列技术峰会的一部分,本次线上峰会秉承干货实料(案例)的内容原则,将邀请圈内顶尖的布道师、技术专家和技术引领者,共话大数据平台构建、优化提升大数据平台的各项性能、Spark部署实践、企业流平台实践、以及实现应用大数据支持业务创新发展等核心话题,旨在通过来自国内一线互联网公司实践案例,为开发者提供一个最有价值的高效的技术交流平台


主题SDCC 2017之大数据技术实战线上峰会

时间10月14日 09:00 - 17:15


日前,大数据技术实战线上峰会也公布了首批的讲师和议题,接下来请看:

董西成 hulu


hulu大数据架构部门负责人董西成

个人介绍: hulu大数据部门负责人,资深Hadoop技术实践者和研究者,拥有超过8年的大数据平台平台研发经验;《Hadoop技术内幕》系列丛书作者。

演讲主题: 《Impala+AtScale:构建企业级OLAP引擎》

主题介绍:大数据时代因数据的多样化和处理的复杂化,构建企业级OLAP引擎面临诸多技术挑战。尽管当前开源界提供了多种OLAP解决方案,但灵活性和性能方面均不能令人满意。本次分享将介绍一种基于Impala和AtScale构建企业级OLAP引擎的方案,并进一步介绍了对Impala进行的源码内核级优化。

听众收益:

  • 大数据OLAP引擎的主流方案及优劣对比;

  • Impala+AtScale应用经验及优化;

  • Impala源码级优化。


许鹏 携程


携程机票高级研发经理许鹏

个人介绍:携程机票大数据基础平台Leader,负责平台的构建和运维。深度掌握各种大数据开源产品,如Spark、Presto及Elasticsearch。著有《Spark源码剖析》一书。

演讲主题:《携程机票大数据基础平台架构演进》

主题介绍:携程机票具有丰富的产品线,拥有海量数据,如何存储、分析和应用这些数据一直是部门痛点所在。携程机票大数据团队结合部门业务实际,广泛尝试各种大数据开源产品,在不断摸索中逐步形成稳定的大数据技术栈,该方案支持海量产线数据落地,亚秒级的实时分析和高效快速的交互式查询,更在此基础上结合业务提出了数据产品服务。

听众收益:

  • 大数据解决方案;

  • 开源产品的选型和运维;

  • 大数据团队的技术能力需求和人员组建;

  • 大数据团队和业务部门的结合。


张璐波 Intel


Intel大数据部门高级软件工程师张璐波

个人介绍:目前就职于英特尔大数据部门,高级软件工程师,上海交通大学硕士。之前主要进行网络协议栈的研发工作,现专注于大数据平台架构、Spark Streaming和SQL。

演讲主题:《端到端、可扩展且高容错性的Structured Streaming流式处理技术进阶》

主题介绍: Spark Structured Streaming 流式处理模块作为Spark Streaming的改进版本,在Spark 2.0中引入并解决了以往流式处理在实际应用中遇到的一些问题,在实时数据处理方面发挥了重要作用。Structured Streaming是建立在Spark SQL引擎之上的端到端、可扩展且高容错性的流式处理系统,你可以像进行批处理那样进行流式表达式计算。

随着数据的不断到来,Spark SQL引擎会持续增量的进行计算并更新结果集。本次分享中,主要介绍Structured Streaming的一些基本概念和工作原理。

听众收益:了解Structured Streaming编程模型以及如何处理实时流中乱序以及延迟到达的数据,并对模块高可用性进行细致的分析。

符鹏飞 永洪科技

永洪科技咨询部咨询总监符鹏飞

个人介绍:目前主要负责金融、制造行业数据咨询工作,并成功推进光大银行、民生银行、中信银行、美的集团、华为等众多大型项目落地,同时兼任永洪数据科学研究院讲师,为各行业数据分析爱好者提供数据分析、数据应用方面的培训及指导工作。

演讲主题:《数据技术的下一站——数据应用》

主题介绍:数据技术日渐成熟丰富,处理海量数据不再是企业的挑战,但大多企业都不知数据该如何利用才能对业务和管理提升真正带来价值。永洪基于自身的实践和探索,找出了一条解决之道。

听众收益:

  • 业务用户:掌握数据分析技巧,开发百花齐放的数据应用;

  • 管理层:如何通过数据应用驱动业务经营;

  • IT技术:如何搭建大数据应用分析架构,如何体现IT资产?


汪木铃 蚂蜂窝

蚂蜂窝大数据平台负责人汪木铃

个人介绍: 2014年至今负责蚂蜂窝数据采集、对接、数据产品的开发及整个大数据平台的架构设计、技术选型,专注于大数据工具链的定制开发及应用。

演讲主题:《蚂蜂窝大数据平台架构演进》

主题介绍:本次分享主要涉及蚂蜂窝大数据平台的架构设计、离线数据探索、实时数据探索、多维数据分析中Druid引擎引入的背景和带来的价值。

听众收益:

  • 如何做离线数据探索;

  • 如何做实时数据探索;

  • 如何做多维度数据分析。


陈守元 阿里


阿里集团计算平台事业部产品专家陈守元

个人介绍:阿里集团计算平台事业部产品专家,7年大数据工作经验,曾负责异构数据同步工具DataX产品和架构设计、阿里云流计算产品设计。

演讲主题:《阿里集团实时流计算平台Blink在阿里集团的应用实践》

主题介绍:本次分享将从阿里集团的大数据处理现状讲起,引出实时流计算在阿里集团几个典型应用,包括双十一大屏、ABTest、机器学习。阿里为应对超大规模海量数据,在Flink上面做了诸多技术优化,包括Yarn Scheduler Optimization、Incremental Checkpoint、ASynchronize IO。为了进一步实现实时流平台产品化,阿里集团为社区贡献了包括StreamSQL等核心功能。在集团内部,Blink提供了一站式流式SQL开发平台和拖拽式的在线机器学习平台,演讲中也会进行讲解。

主题介绍:

  • 用户了解流计算在阿里集团的应用案例;

  • 用户了解当前阿里集团在Flink上的重点技术/产品投入点;

  • 用户了解阿里集团内部对于流计算的产品化。


王哲涵 京东


京东大数据平台数据架构部架构师王哲涵

个人介绍: 2015年加入京东,期间在大数据平台研发部工作,目前负责京东大数据平台的架构与研发工作。

演讲主题:《Presto的服务治理与架构优化及在京东的实践与应用》

主题介绍: Presto是大数据adhoc查询的利器,京东对于Presto有较大封装及改造, 将其管理、部署、监控及自愈升级自动化,同时在性能上有大胆的创新尝试,对支撑高并发和缓存查询有较深的研究。

听众收益: Presto的服务治理与架构优化。

如何报名?点击【阅读原文】立即报名!(还可以扫码入群哦

群满请到报名页查看


本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/525820.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Linux添加gcc软连接,linux静态库,动态库和硬链接,软连接

静态库1、命令gcc -c a.c b.c生成a.o和b.o;2、命令ar -r libname.a a.o b.o生成包含名为libname.a的静态库;3、命令gcc main.c libname.a可以在main中链接静态库libname.a。动态库(共享库)1、命令gcc -c a.…

微服务应用容器化场景中常见问题总结

简介:云原生技术栈是下一代应用转型的必然选择,它包含了微服务架构,DevOps和容器技术。对于微服务架构来说,应用是“第一公民”,他逐渐蚕食原来底层软件或者硬件的功能,例如服务注册与发现以及负载均衡&…

linux用date指令,Linux中date指令的使用

1. 只输入date就会显示年月日时间二.date的设置 使用 -s设置时间和日期的的命令1..date –s 11:32:342..date –s 20101232就会显示年月日,但这样会把时间清零3..date –s ‘2010-10-2 11:22:21’这样就会显示修改的信息4.. date –s “2010-10-2 11:22…

Swarm的进化和大规模应用

目前在容器编排领域,Kubernetes、Mesos以及Swarm呈现“三分天下”的格局,各自都有着不同的应用场景。短期内,很难看到“一统天下”的局面,本文,来自阿里云高级专家陈萌辉将带你了解阿里内部在推行容器化过程中的一些着…

linux可以用dos命令是什么意思,Linux系统常用命令与DOS命令的类似之处和本质区别各是什么?...

满意答案iedsa3641推荐于 2019.09.13采纳率:56% 等级:8已帮助:361人Linux是一个非常优秀的操作系统,与MS-WINDOWS相比具有可靠、稳定、速度快等优点,且拥有丰富的根据UNIX版本改进的强大功能。下面做一个…

从 0 到 300,Instagram 创始人 CTO 分享工程团队成长的经验

最初,Instagram 被 Facebook 收购时公司只有六个工程师,且都是全栈。本文Instagram 创始人兼 CTO Mike Krieger 分享了创业初期并在资源有限的情况下,人才招聘、技术专攻的实践经验,将时间、精力用在最有价值的地方。以下为译文&a…

深度揭秘Twitter的新一代流处理引擎Heron

流计算又称实时计算,是继以Map-Reduce为代表的批处理之后的又一重要计算模型。随着互联网业务的发展以及数据规模的持续扩大,传统的批处理计算难以有效地对数据进行快速低延迟处理并返回结果。由于数据几乎处于不断增长的状态中,及时处理计算…

linux生成图片快捷方式,在Deepin Linux系统下给AppImage格式软件创建快捷方式的方法...

这两天使用deepin的过程中,无意中发现了一个叫krita的程序,是一个图像处理软件,类似Photoshop,于是就下载krita-4.2.8-x86_64的这个版本。但是麻烦的就是他是一个AppImage格式,每次我打开的时候需要打开相应文件夹中的…

图数据库在CMDB领域的应用

【导语】在上期的图数据库介绍中,我们对什么是图数据库,以及图数据库所擅长的领域做了一个初步的介绍,也收到了众多的反馈和咨询,特别要求我们对图数据库在一些具体行业的应用能做一些深入介绍。为此,从本期文档开始&a…

北理在线作业答案c语言,北理工19春《面向对象程序设计》在线作业【标准答案】...

北理工《面向对象程序设计》在线作业-0003试卷总分:100 得分:0一、 单选题 (共 38 道试题,共 76 分)1.对虚函数的调用()A.一定使用动态联编B.必须使用动态联编C.一定使用静态联编D.不一定使用动态联编2.下列关于派生类的描述中,错误的是()。A.派生类继承了基类的…

从分布式到微服务,深挖Service Mesh

原文:Pattern: Service Mesh (作者/Phil Calado,翻译/雁惊寒,责编/魏伟 ) 摘要:在前一段时间,我们CSDN推出了《深度剖析Service Mesh服务网格新生代Istio》一…

c语言程序设计安徽区笔试部分,2021年安徽省二级C语言程序设计笔试样题-20210419093521.doc-原创力文档...

第1套 C语言程序设计笔试样题一 单项选取题(每题1分,共40分)1.某微型计算机型号规格标有PentiuШ600字样,其中PentiuШ是指 __C____A. 厂家名称 B. 机器名称 C. CPU型号 D. 显示屏名称2.当前微型机上普通使用光驱及光盘,它采用是__C____A. 超…

应用开发者必须了解的Kubernetes网络二三事

Kubernetes网络基本的部署调度单元:Pod Kubernetes中的基本管理单元并非是一个容器,而是一个叫做pod的东西。我们认为部署了一个或多个容器的环境是一个pod单元。通常情况下,它们代表了提供部分服务的单个功能端点。 举两个有效的pods单元为例…

c51编程语言基础习题,《单片机基础》练习题及答案

单片机基础(第3版)第1章计算机基础知识(一)填空题1.十进制数14对应的二进制数表示为(1110B),十六进制数表示为(0EH)。十进制数-100的补码为(9CH),100的补码为(64H)。2.在一个非零的无符号二进制整数的末尾加两个0后,形成一个新的无符号二进制…

高可用Docker容器云在58集团的实践

58私有云平台是58同城架构线基于容器技术为内部服务开发的一套业务实例管理平台,支持业务实例按需扩展,秒级伸缩,平台提供友好的用户交互过程,规范化的测试、上线流程,旨在将开发、测试人员从基础环境的配置与管理中解…

c语言程序设计课件数组,数组(C语言程序设计)课件

数组(C语言程序设计)课件 前牙反颌和开颌的原因多由于不良喂养方式和吮指等不良习惯造成,也可因多颗乳磨牙过早缺失,迫使儿童用前牙咀嚼,下颌逐渐前伸移位造成。 前牙反颌和开颌的原因多由于不良喂养方式和吮指等不良习惯造成,也可…

Docker CE/EE 原生支持Kubernetes

在今天的 DockerCon EU (2017) 上,Solomon 宣布 Docker 将原生支持 Kubernetes,也就是说 Kubernetes 将和 Swarm 一样作为 Docker 平台的编排管理系统。这包括 Docker EE、Docker CE 以及 Docker for Mac/Windows 等全平台的支持。 Docker for Mac/Windo…

c语言创建一个hello.txt文件,并检查是否成功,广东工业大学C语言验(上机)任务书2015版.doc...

广东工业大学C语言验(上机)任务书2015版广东工业大学实验(上机)任务书(2015 — 2016 学年度第 1 学期)课程名称 高级语言程序设计 课程设计 实验室名称及地点: 实验2号楼306指导教师: 孟安波、王星华 周次节次实验主要内容每组学生人数具体任务要求65-8熟…

网易云容器服务基于Kubernetes的实践探索

Kubernetes的特点 近年来Docker容器作为一种轻量级虚拟化技术革新了整个IT领域软件开发部署流程,如何高效自动管理容器和相关的计算、存储等资源,将容器技术真正落地上线,则需要一套强大容器编排服务,当前大红大紫的Kubernetes已经…

c语言程序设计中三子棋游戏,C语言实现简易版三子棋游戏

本文实例为大家共享了C语言实现三子棋游戏的详细代码,供大家参考,详细内容如下什么是多文件?多数大型的工程的头文件和源文件非常多,我们也不可能把所有的代码都写在同一个文件里,这样也不方便代码的阅读与维护&#x…