阿里开发者们的第15个感悟:做一款优秀大数据引擎,要找准重点解决的业务场景

2015年12月20日,云栖社区上线。2018年12月20日,云栖社区3岁。
阿里巴巴常说“晴天修屋顶”。

在我们看来,寒冬中,最值得投资的是学习,是增厚的知识储备。
所以社区特别制作了这个专辑——分享给开发者们20个弥足珍贵的成长感悟,50本书单。

多年以后,再回首2018-19年,留给我们自己的,除了寒冷,还有不断上升的技术能力与拼搏后的成就感。

云栖社区钉钉技术讨论群,已有5000+开发者。
云栖社区2019年1月30+场活动预告【持续更新,欢迎加入】 学习,是一种氛围。

1月10日,做一款优秀大数据引擎,要找准重点解决的业务场景。这是我们送给开发者的第15个感悟。

沐远在社区分享了他的博文,《使用spark分析云HBase的数据》《hive数据导入云hbase》,粉丝评论说请收下我的膝盖。

李伟(沐远)
阿里云数据库技术专家
专注大数据分布式计算数据库领域, 研发Spark及自主研发内存计算,目前为广大公有云用户提供专业的云HBase数据库及计算服务。

做一款优秀大数据引擎,要找准重点解决的业务场景,打磨一套易用的API,构架与上下游联动的生态。

推荐书单:

《黑客与画家》 
《深入理解计算机系统》 
《大数据之路》

_iphone8_


1月9日,技术拓宽技术本身价值,商业价值,更加拓宽的是人生价值的边界。这是我们送给开发者的第14个感悟。

孤尽,阿里巴巴技术专家,花名取意“孤帆远影碧空尽”的意思,《阿里巴巴Java开发手册》的主要编写者。2016年3月,孤尽带领约码项目组编写《阿里巴巴Java开发手册》,码出高效,码出质量,推动阿里系与业界一起进步,让代码变得更舒服,更清澈,更好维护。

2018年5月,孤尽在《向代码致敬,寻找你的第83行》活动中晒出了他入职第一年写的代码,大家赶紧来找找是否有不合规约的地方。

欢迎开发者关注他,并加入钉群与孤尽深度讨论。

《阿里巴巴Java开发手册》史上最全资料点此查看!

阿里孤尽:技术拓展价值边界

杨冠宝(孤尽)
阿里巴巴代码平台负责人。
阿里巴巴代码规约的起草者和推动者。
在阿里历任研发、架构师、技术主管等不同的角色,承担过双十一、国际化、代码中心等大型项目,有着丰富的一线编程经验,在大数据、高并发、研发效能领域均有较深的造诣,乐于分享与总结,在国内外做过多次大型交流和培训。

技术拓宽技术本身价值,商业价值,更加拓宽的是人生价值的边界。 
好的代码是艺术,好的代码思维是哲学。程序员在技术进阶的路上,敢于象艺术大师一样不断地雕琢自己的作品,思考代码背后的逻辑,不断地提炼和总结,成就传奇代码人生。 
记忆、思考、表达、融会贯通是学习的四步曲,第一步是基础,更是一个体力活。

出版图书:

《阿里巴巴Java开发手册》 
《码出高效》

推荐书单:

《Effective Java》 
《设计模式之禅》 
《深入JVM虚拟机》

_


1月8日,工程师需要在业务、场景、产品和技术的循环迭代中成长。这是我们送给开发者的第13个感悟。

明朔在云栖社区的专家页介绍很简洁:长期从事大数据系统研发。欢迎开发者关注他,并加入钉群与明朔深度讨论。

阿里明朔:仰望星空,脚踏实地

陈明(明朔)
Aliyun HBase SQL负责人
七年大数据系统经验
曾负责阿里集团Spark四年
自主研发内存计算引擎和MaxCompute联合计算平台

程序员通过代码给他人赋能,从而改变世界。
工程师需要在业务、场景、产品和技术的循环迭代中成长。

推荐的书单:

《数据库系统实现》
《赋能》
《未来简史》

_iphone8


1月7日,想不通了就换个角度。多维思考,胜过盲目苦干。这是我们送给开发者的第12个感悟。

炯轩,7年安卓研发经验,108项安卓相关国内外发明专利,曾主导知名开源插件化项目的研发。现在高德从事动态化(JS + Native)方向的工作。也是云栖社区的问答频道当之无愧的达人。开发者们可以在关注专家页与炯轩互动。

阿里炯轩:因为相信,所以看见

高德无线开发专家
7年安卓研发经验,108项安卓相关国内外发明专利,曾主导知名开源插件化项目的研发。现在高德从事动态化(JS + Native)方向的工作

码如其人:你的代码,就是你的脸面,是你工作态度的体现。 
工匠精神:像对待工艺品那样,精心打磨。时间会给你回报。 
跳出循环:想不通了就换个角度。多维思考,胜过盲目苦干。

推荐书籍:

《编写可读代码的艺术》 
《人月神话》 
《程序员健康指南》

_


1月4日,我们不一定知道正确的道路是什么,但却不要在错误的道路上走的太远。这是我们送给开发者的第11个感悟。

唐修,阿里云数据库和应用迁移(ADAM) 高级产品经理。在社区和钉群很活跃,尤其在最近业内比较关注的话题:Oracle数据库和应用上云,怎样做最靠谱?很有见地。此外还有系列内容:

PostgreSQL 远程链接 Sever端配置
PostgreSQL 11源码安装
EDB Postgres MTK 使用小记

阿里唐修:天道酬勤

阿里云数据库和应用迁移(ADAM) 高级产品经理
ORACLE数据库专家,ADAM产品专家。

我们不一定知道正确的道路是什么,但却不要在错误的道路上走的太远。
拥抱变化,用正确的方法对待工作。

推荐的书单:

《麦肯锡卓越工作方法》
《C++ Primer Plus》
《数据库事务处理的艺术》

_CFFA9F84_463B_46e7_B9A5_D224679A119F


1月3日,产品经理最优秀的能力,是框架思维,脑海中有蓝图。这是我们送给开发者的第10个感悟。

作为阿里云NoSQL/NewSQL/HTAP产品负责人,开发者们可以在社区的专家页找到所在。他最新的一篇博文是回顾。推荐一读。
《2018年阿里云NoSQL数据库大事盘点》

阿里所在:一个产品经理的修炼之路

朱洁(所在)
阿里云数据库NoSQL/HybridDB产品线产品负责人
10年+数据库/大数据研发管理经验,专注于数据库/大数据服务平台建设、规划和实践应用。

企业级云产品始终要围绕客户价值进行优化和创新;
产品经理最优秀的能力,是框架思维,脑海中有蓝图;
做产品,就是追求卓越的过程。

出版的图书:

《大数据架构详解:从数据获取到深度学习》

推荐的书单

《基业长青》
《刷新》
《深度思考:不断逼近问题的本质》

_C384A752_F80E_4ead_920D_966C796D0155


2019年,新年快乐。1月2日,脱离产品价值,是难以出创造性的代码的。这是我们送给开发者的第9个感悟。

作为战略布局的重要组成部分,广州云栖大会上,阿里云的工业物联网为制造数字化提供了基础设施,包括:端、边缘计算和云平台。 “端”主要通过AliOS Things、Link kit SDK(阿里智能生活物联网飞燕平台)等安全地连接各种端设备;边缘计算则实现工业数据的实时分析与实时决策,然后直接下发机器执行;而一个更为广泛的云平台,则实现了连接管理、设备影子、设备模型等,从而管理数字化的物、料、机器等,在此基础设施之上再用大数据、人工智能等产生各种应用解决方案:包括设备运维、机床数字化改造、产品视觉检测等场景解决方案,以及远程监控、故障预测、设备台账等工业APP。

AliOS Things(阿里物联网操作系统)的技术团队正在源源不断的在社区中分享实践经验。欢迎关注他们的云栖号《AliOS Things》。

阿里灵壹:平静如水, 激情似火

灵壹, 阿里云IoT事业部技术专家
负责物联网嵌入式系统AliOS Things技术开发和产品落地

仅专注于技术进步,脱离产品价值,是难以产出创造性的代码的,我们的职责是产出共筑产品的基石;
思想,技术,劳作在成为产品的过程中,充满着热情,快乐的工作为我们的成就注入活力。

推荐的书单:

《从零到一》
《设计模式》

_iphone8


12月29日,在信息大爆炸的时代,保持专注度显得尤为可贵。这是我们送给开发者的第8个感悟

阿里圭多:保持专注,持续学习

何登成
阿里巴巴数据库事业部OLTP数据库负责人
负责打造阿里自研新一代分布式数据库X-DB

这个时代,任何你感兴趣的知识和技术,都可以通过网络进行深入学习。千万别做新时代的叶公好龙 
在信息大爆炸的时代,保持专注度显得尤为可贵。Stay focused 
结合1和2,我的建议:认准方向,保持专注,持续学习,做一年比一年更好的自己

推荐书单

《美国简史》这个时期,简单了解一下美国,非常有必要 
《鞋狗》懦夫从不启程,弱者死于路中,只剩我们前行 
《System Performance: Enterprise and the Cloud》

_iphone8


12月28日,做一件事情,需要有道有术。这是我们送给开发者的第7个感悟。

封神,HBase大牛。先后研发上万台Hadoop、ODPS集群;先后负责阿里分布式调度平台YARN;自主研发分布式内存计算引擎,负责Spark; 目前为广大公共云用户提供专业的大数据结构化存储服务(云HBase)。封神在社区非常活跃,博文、直播、问答都可以看到他的身影,而在今年我们一起重点打造的HBase社群中,已经有2200+志同道合的开发者一起,不断学习和探讨。

阿里封神:心智改变人生,大数据改变世界

曹龙(封神)
阿里云ApsaraDB HBase技术负责人,中国HBase开源技术社区发起人之一,10多年大数据库、数据库经验
参与研发维护阿里万台Hadoop及ODPS集群

当你改变心智,你就会改变人生; 
天地不仁以万物为刍狗,需要自身寻求意义之所在,不可苟活; 
做一件事情,需要有道有术,阶梯发展,且成事之前大凡修身养性; 
数据是我们在这个世界运行的痕迹,合理使用处理数据能让我们的世界更加美好。

推荐的书单:

《失控》
《进入空气稀薄地带》

_iphone8

12月27日,享受折磨。这是我们送给开发者的第6个感悟。

铁庵,来自于他的高中的母校 杨仙逸中学,杨仙逸将军(中国近代航空事业的先驱,被誉为“中国革命空军之父”),字学华,号铁庵。

《享受“折磨”》这是铁庵送给开发者的成长感悟。

每天忙碌在产品及项目工作中时,有时也会疲惫。然而,每当想起自己的初心和理想,还有家人的支持,一切随即化作无限的幸福。

阿里铁庵:从码农到产品经理

萧少聪(铁庵)
阿里云RDS系列数据库高级产品专家
PostgreSQL中国用户会2015-18届主席
中国区首位 EDB Postgres认证专家
中国区前20名 红帽RHCA认证架构师 之一

开源是一种信仰,代码可以开源,文章也可以开源,PPT也可以开源。
基于前人的智慧将让你事半功倍,与他人分享成果,会让你的智慧长成参天大树。
写代码如此,做产品亦如此,让自己成为大家的地板,让分享成就快乐。

推荐的书单

《PostgreSQL实战》
《物演通论》

_anE762EFDB_C296_4057_B53A_6C31128BD6C8


12月26日,听话,出活。这是我们送给开发者的第5个感悟。

隐达是阿里云FPGA异构计算负责人,花名寓意是做人隐,做事达。在社区的专家页面中,如此介绍自己:业余时间喜欢看美剧和读书,尤其是历史书;还喜欢喝点小酒侃大山,喝酒只喝啤酒和威士忌;酒量比较差,但是酒品还过得去。我在某通信公司工作了18年,其中十年的大规模FPGA/ASIC开发、系统设计作。期待更多系列内容。

FPGA设计之“甩锅大法”
FPGA设计中遇到的奇葩问题之“芯片也要看出身”(三)
FPGA设计中遇到的奇葩问题之“芯片也要看出身”(二)
FPGA设计中遇到的奇葩问题之“芯片也要看出身”(一)

阿里隐达:things that don't kill you make you stronger

隐达
阿里云FPGA异构计算负责人
20年FPGA、ASIC、硬件开发经验,对数据中心FPGA加速有一些实践和落地

听话,出活。
时来天地皆同力,运去英雄不自由。
识不足则多疑,威不足则多怒,信不足则多言。

推荐的书单:

《见识》
《智能时代》
《大学之路》

_


12月25日,自驱是最好的进步方式,不设限,综合提高自己的能力,这是我们送给开发者的第四个感悟。

阿里城池:hungry and humble,永远不够好

城池所带领的前端技术团队一直与云栖社区密切配合,每一场的云栖大会的精彩呈现都是大家的努力。1月6日第13届D2前端技术论坛将在杭州举办,欢迎参加。《Google、Facebook、GitHub、Babel核心成员齐聚,第13届D2前端技术论坛正式启动》。

邓小明(城池)
阿里云高级前端技术专家
多年前端&全栈研发经验,在工程化、serverless有一些实践及落地

自驱是最好的进步方式;
永远不够好;
不给自己设限,不限定自己的角色,综合提高自己的能力;
从0-1很艰难,但也很有趣

书单

《基业长青》
《企业IT架构转型之道阿里巴巴中台战略思想与架构实战》

_iphone8

12月24日,从身边熟悉的开源系统开始,用过才能更好理解代码。这是我们送给开发者的第3个感悟。

正研,社区HBase社群大V。在他的博文中,《HBase2.0中的Benchmark工具 — PerformanceEvaluation》、《深入解读HBase2.0新功能之高可用读Region Replic》、《深入解读HBase2.0新功能之AssignmentManagerV2》、《消灭毛刺!HBase2.0全链路offheap效果拔群》可以清晰看到经验的积累。

阿里正研:开源改变世界

杨文龙(正研)
阿里巴巴存储技术事业部技术专家
Ali-HBase内核研发负责人
ApacheHBase社区Committer&PMC成员
对分布式存储系统的设计、实践具备丰富的大规模生产的经验

有些人一直想去学习热门开源软件的代码,但其实不如从身边熟悉的开源系统开始;
因为只有用过,才能更好地理解代码,
只有带着实际生产的问题去看,才能明白为什么要这样去设计架构。
反过来,只有从源码级理解这个系统,才能在使用过程中避免采坑。

推荐的书单

《深入理解计算机系统》
《HeadFirst设计模式》

_iphone8


12月21日,使命感与开放心态,是我们送给开发者的第2个感悟。

阿里德歌:公益是一辈子的事,I'm digoal, just do it

德歌,江湖人称德哥。PG大神,在社区拥有6500+位粉丝。三年来,他沉淀在社区的博文超过2000+篇。还记得社区刚成立时,有位开发者在博文后留言“我一直认为PG是小众数据库,没想到社区有这么多干货。” 三年过去,PG的地位一直在上升,云栖社区PG钉群也已经超过1000位开发者在一起交流讨论。


周正中(德歌)
PostgreSQL 中国社区发起人之一,PostgreSQL 象牙塔发起人之一,DBA+社群联合发起人之一,10余项数据库相关专利,现就职于阿里云数据库内核技术组。

学习第一要有使命感,第二要有开放的心态。使命感是技术为业务服务,结合业务一起创造社会价值,有使命感才能让你坚持下去,遇到困难时不容易被打倒。开放是在扎实的技术功底之上,跳出纯粹的技术从生态进行思考,要埋头苦干也要抬头看路。比如行业生态中重叠部分,盟友与竞争关系,问题及补齐办法等,同时也要密切关注国家和国际形势,分析背后原因,在未来技术方向决策上避免逆流行舟。

推荐的书单:

《PostgreSQL实战》

_


12月20日,场景中学习,这是我们送给开发者的第1个感悟。

阿里毕玄:程序员的成长路线

在这篇《程序员的成长路线》里,阿里基础设施负责人毕玄结合自己的经历跟大家讲述了他在各个角色上成长的感受。在他的职业经历中,在成长方面经历了技术能力的成长、架构能力的成长,以及现在作为一个在修炼中的技术 Leader 的成长。其中技术能力和架构能力的成长是所有程序员都很需要的,值得所有正为职业发展而迷茫的技术同学细细品味。


林昊(毕玄)
阿里基础设施负责人
阿里巴巴HSF、T4创始人,HBase负责人
主导阿里电商分布式应用架构、异地多活架构、资源弹性架构升级

程序员,要寻找甚至创造场景来学习相应的技术能力。正如学Java通讯框架,尝试基于BIO/NIO写一个,然后对比Mina/Netty,看看为什么不一样;学Java的内存管理,尝试写程序去控制GC的行为。书籍外,更建议翻看源码,结合场景才能真正理解和学会。我的职业经历是技术能力成长、架构能力成长和正在修炼中的技术Leader的成长,三条路线都可发展,没有孰优孰劣,兴趣、个人优势仍是最重要的。

出版的图书:

《OSGi原理与最佳实践》
《分布式Java应用:基础与实践》

推荐的书单:

《硅谷之谜》
《智能时代:大数据与智能革命重新定义未来》

_1

预计更新到1月20日,欢迎收藏。

 

原文链接
本文为云栖社区原创内容,未经允许不得转载。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/520013.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

解决vsftpd 读取目录列表失败的问题

文章目录1. 问题现象2. 解决方案(重启时效)3. 重启失效解决1. 问题现象 使用第三方FTP软件filezilla进行登陆,出现如下错误: 状态: 正在连接 192.168.1.6:21... 状态: 连接建立,等待欢迎消息... 响应: 220 (vsFTPd 2.2.2) 命令: …

阿里开发者们的第16个感悟:让阅读源码成为习惯

2015年12月20日,云栖社区上线。2018年12月20日,云栖社区3岁。 阿里巴巴常说“晴天修屋顶”。 在我们看来,寒冬中,最值得投资的是学习,是增厚的知识储备。 所以社区特别制作了这个专辑——分享给开发者们20个弥足珍贵的…

腾讯云全面更新数据智能服务全景图!

近日在腾讯云AI大数据新品发布会上,腾讯云副总裁王龙向听众全面介绍了当前腾讯云数据智能服务的全景布局。针对目前整体AI行业的发展趋势,他表示过去一招鲜的发展模式已经难以为继,取而代之的是真正能够产生价值的、端到端的、全面的AI解决方…

揭秘人工智能(系列):人工智能带来的网络安全威胁

历史表明,网络安全威胁随着新的技术进步而增加。关系数据库带来了SQL注入攻击,Web脚本编程语言助长了跨站点脚本攻击,物联网设备开辟了创建僵尸网络的新方法。而互联网打开了潘多拉盒子的数字安全弊病,社交媒体创造了通过微目标内…

支付宝工程师创造出了一个可以“拷贝”支付宝的神器

mPaaS是源于支付宝的移动开发平台,从最初的金融级移动开发平台,逐渐演进成集开发、测试、发布、分析、运营于一体的 App 全生命周期管理平台,服务了广发银行、12306、上海地铁等标杆级客户,帮助客户完成技术升级与业务增长。 “拷…

Kubernetes API 与 Operator,不为人知的开发者战争

如果我问你,如何把一个 etcd 集群部署在 Google Cloud 或者阿里云上,你一定会不假思索的给出答案:当然是用 etcd Operator! 实际上,几乎在一夜之间,Kubernetes Operator 这个新生事物,就成了开…

面试编程岗,期望40K,为什么老板给我翻倍?

临近年底,互联网正在经历优化升级,不少公司出现了裁员新闻,也有很多人纷纷转型、跳槽。那么 IT领域内,什么样的工作比较好?最近笔者看笔者在网上看到一个被裁员的帖子,但仍被震撼到了,也许答案不…

linux上传下载文件命令rz、sz

要使用rz、sz命令传输文件需要给服务器安装lrzsz: yum -y install lrzsz命令sz、rz的使用方法 rz中的r意为received(接收),输入rz时,意为服务器接收文件,即将文件从本地上传到服务器。 sz中的s意为send(发送),输入sz时&#xff…

从概念到技术,打通「中台」的任督二脉,别再说不知道中台是什么

2019 年,「中台」这个词火了!随着阿里等头部互联网企业搭建和推动中台业务,让越来越多的企业关注中台,纷纷提出「中台战略」,帮助企业自身加速实现数字化转型。不少企业还在观望「中台」:1、我的企业里需要…

Mars 如何分布式地执行

先前,我们已经介绍过 Mars 是什么。如今 Mars 已在 Github 开源并对内上线试用,本文将介绍 Mars 已实现的分布式执行架构,欢迎大家提出意见。 架构 Mars 提供了一套分布式执行 Tensor 的库。该库使用 mars.actors 实现的 Actor 模型编写&am…

maven编译 Process terminated【已解决】

在idea中打开了settings文件,找到提示的报错位置,删除或者调整即可

揭秘人工智能(系列):深度学习是否过分夸大?

2012年左右,多伦多大学的研究人员首次使用深度学习来赢下了ImageNet,它是一项非常受欢迎的计算机图像识别竞赛。对于那些参与AI行业的人来说,这是一个大问题,因为计算机视觉是使计算机能够理解图像背景的学科,也是人工…

互联网诞生记:风起于青萍之末

戳蓝字“CSDN云计算”关注我们哦!作者 | 老姜出品 | CSDN云计算(ID:CSDNcloud)“起初阿帕创造阿帕网络。阿帕网络是空虚混沌。渊面黑暗。阿帕的灵运行在网络里面。阿帕说:‘要有一个协议。’就有了一个协议。阿帕看它是…

powerpc 汇编linux,PowerPc下的寻址模式

本篇文章主要描述了Powerpc的寻址模式,让自己对内存映射、寻址的概念理解深入些。在开始讨论寻址模式之前,让我们首先来回顾一下计算机内存的概念。可能之前已经了解了关于内存和编程的一些事实,但是由于现代编程语言正试图淡化计算机中的一些…

2018最佳GAN论文回顾(上)

我很高兴今年参加了一个研究项目,这要求我必须熟悉大量用于计算机视觉方面的深度学习领域的资料。我对过去两、三年内取得的进展感到惊讶,这真的非常令人兴奋和鼓舞,所有不同的子领域,如图像修复、对抗性样本、超分辨率或是三维重…

被神话的大数据——从大数据(big data)到深度数据(deep data)思维转变

自从阿法狗战胜人类顶级棋手之后,深度学习、人工智能变得再一次火热起来。有些人认为,深度学习的再一次兴起是源于硬件的提升、数据量的增多以及高效算法的研究。这并不完全精确,有一个基本的误解是更大的数据会产生更好的机器学习结果。然而…

spring整合rabbitMQ最新版

文章目录一、简单对象1. 依赖2. 生产者3. 消费者4. 配置文件5. spring版本二、复杂对象2.1. 生产者2.2. 消费者一、简单对象 1. 依赖 <!--spring整合rabbitmq--><dependency><groupId>org.springframework.amqp</groupId><artifactId>spring-ra…

搞定面试算法系列 | 分治算法三步走

戳蓝字“CSDN云计算”关注我们哦&#xff01;作者 | 江子抑转自 | 编程拯救世界主要思想分治算法&#xff0c;即分而治之&#xff1a;把一个复杂问题分成两个或更多的相同或相似子问题&#xff0c;直到最后子问题可以简单地直接求解&#xff0c;最后将子问题的解合并为原问题的…

通过FD耗尽实验谈谈使用HttpClient的正确姿势

一段问题代码实验 在进行网络编程时&#xff0c;正确关闭资源是一件很重要的事。在高并发场景下&#xff0c;未正常关闭的资源数逐渐积累会导致系统资源耗尽&#xff0c;影响系统整体服务能力&#xff0c;但是这件重要的事情往往又容易被忽视。我们进行一个简单的实验&#xf…

与“十“俱进 阿里数据库运维10年演进之路

导语 阿里巴巴集团拥有超大的数据库实例规模&#xff0c;在快速发展的过程中我们在运维管理方面也在不断的面临变化&#xff0c;从物理器到容器、从独占到混布、从本地盘到存储计算分离、从集团内到大促云资源&#xff0c;从开源的MySQL到自研分布式数据库&#xff0c;运维管控…