阿里云数据湖解决方案全面满足数据需求,帮助企业释放数据价值

简介: 基于阿里云对象存储OSS构建的数据湖解决方案,可以全面满足数据的存储、离线分析、交互查询等各种业务诉求,帮助企业释放数据的价值

1、行业综述

游戏市场需求旺盛,行业景气度持续提升
2020年突如其来的疫情,使全国上下在2—3月处于全面抗疫,严防死守的状态,各行各业都受到了冲击,对国民经济造成了不小的影响。虽然此次疫情对于各行各业产生的影响颇深,但是对于“宅经济”来说,确实一针兴奋剂。
据统计,2020年第一季度,国内游戏市场稳中有升,实际营销收入732.03亿元。一季度中国自主研发游戏海外市场营销收入37.81亿美元,环比增长31.19%,同比增长40.56%,继续保持较高增速。
相比往年,今年在8月份刚结束的ChinaJoy,会发现一个高频词浮现,那就是“云游戏”。根据今年早些时候发布的《2020年云游戏产业调查报告》,今年中国云游戏的市场规模将超过10亿元,未来两年每年增长率超过100%,接下来的3到5年将是中国云游戏的快速成长期。

2、行业发展方向

换皮游戏时代已经终结,大数据驱动智能化精准运营
随着国内游戏行业的迅速发展,游戏画面更加精良,游戏引擎也愈加真实,玩家对于游戏内容品质要求越来越高,且游戏厂商众多,游戏迭代速度加快,玩家留存率大大降低。流量称王的时代终结,单纯靠流量导流的方式获取客户的行为收益极低。因此“换皮游戏”逐渐被这个时代所抛弃,游戏厂商要想在行业立足,在提供画面更优质、内容更丰富、游戏性更强的游戏同时,还需要依靠大数据分析,解决玩家个性化的需求以及进行更加精准的营销。
在解决完画面、内容以及游戏性等“硬件要求”后,越来越多的企业已经开始意识到需要把游戏数据进行更加精细化的运营分析,根据用户的活跃数据、充值数据、偏好数据等为用户推送不同的活动以及玩法。同时还会根据用户的战绩数据、游玩时长等为不同的用户提供不同的匹配逻辑与关卡难度。
相信大家在游玩MOBA类游戏时会发现,一般在连胜后,就会遭遇连败,输到自己怀疑人生。但是连败后又往往会迎接一波连胜,如此循环,最后将胜率稳定在50%上下。可能这一把匹配到的队友超强,“全场带飞”,下一把的队友就可能是个“萌新小可爱”,蹦蹦跳跳地进入敌方防御塔范围送人头。
这其实就是运用大数据驱动的一种方式,通过综合分析游戏玩家每把游戏表现来为玩家匹配不同的队友,最终让大部分玩家的胜率保持在50%上下,避免玩家因为连胜或者连败对该款游戏失去兴趣,大大增强了玩家的整体游戏体验,增强玩家的留存率,刺激更多的玩家为提升自己的实力进行消费。

面临的痛点

大数据驱动下数据存储成难题,资源浪费成难题
虽然在大数据的驱动下,可以精确地对相关用户进行营销,但是在大数据系统构建的时候,很多企业又遇到各种各样的技术挑战。比如,一份数据存储在在生产存储上,需要通过RAID或者多副本的方式进行冗余存储。这个时候我们要做大数据分析,需要把这些数据进行抽取、ETL处理,来复制到像Hadoop、HDFS存储上。但是通常情况下HDFS需要做三副本,因此一份数据通常需要拷贝5,6份以上,占用了大量的存储空间。
随着后期数据量的不断增长,扩容也逐渐成为了一个头疼的问题,像Hadoop原生的这种计算、存储融合的架构,如果需要进行扩容,就必须购买原来同规格服务器,极易造成计算、存储资源的浪费。更让人头疼的是,多个业务系统的数据往往是孤立的竖井状的,各个数据处理、分析系统不兼容,不能用一套大数据平台进行统一的数据存储、分析,管理复杂度极高。
1.png

数据湖解决方案

**阿里云数据湖解决方案,助力企业真正释放数据价值
**
基于阿里云对象存储OSS构建的数据湖解决方案,可以全面满足数据的存储、离线分析、交互查询等各种业务诉求,帮助解决上面提到的这些难题。
首先,数据湖解决方案可为用户存储的数据提供高达12个9的可靠性,让数据安全存放,保障用户数据不丢不坏。

 其次,阿里云的数据湖解决方案,也是一套十分智能的解决方案。其中对象存储OSS,可以对接个多业务系统,存储来自不同业务系统的多种数据源,如些系统的原始数据、游戏日志数据等。等数据汇聚到数据湖之后,它的上层系统可以兼容多种计算引擎,如开源大数据引擎像Hadoop,Spark,阿里云EMR、DLA等,帮助用户便捷地实现数据处理和分析,不需要再重复拷贝多份。同时采用 Jindofs提供缓存加速方案,还可以获得比使用HDFS更好的体验。

同时DLA所提供的双引擎,SQL(兼容Presto)和Spark为用户提供了在计算引擎层面job级别的弹性能力,只需要为每一个job消耗的计算资源付费,而无需搭建集群,Serverless化的计算能力,让用户可以使用SQL&Spark赋能业务,结合OSS的弹性能力,真正意义做到按量付费,降本增效。

2.png
这样一套整体的数据存储、处理分析解决方案,能很大程度地减少系统兼容性问题,管理维护也更加简单,帮助IT人员从复杂且繁琐的运维中解放出来,更加专注在产品创新和业务模式的运营上。

最佳案例实践

客户介绍
国内顶级游戏公司,出海手游TOP10,涉及的游戏类型包括休闲类游戏、卡牌类游戏、回合类游戏等。

业务痛点:

出海经历了最初的跑马圈地阶段,中国厂商对出海重视程度来到了更高级别。
游戏比拼的聚焦在精细化运营上面,精细化运营作为出海的必备技能如何提升运营效率,如何实时渠道和流量分析,ROI分析,如何智能化提升玩家活跃度,用户行为分析提高游戏体验。常常会碰到下面这些问题:
wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==

1.需要处理海量并且日益增长的日志数据。
2.需要提供弹性能力,达到最优的财务平衡。
3.数据分析师熟悉SQL,常常会有大数据量的多表join。
4.需要提供全面的游戏运营指标分析功能。
5.需要有效分析渠道效果,使每分钱都花在刀刃上。
6.对付费用户追踪分析,从而更好的反映付费用户在整7.个生命周期的关键行为和价值。
8.分析玩家游戏行为,购买道具改进产品体验,提高游戏收益

解决方案:
1、利用DLA的弹性计算能力,配合OSS的近乎无限的弹性存储能力,构建弹性数据湖方案,打造最优性价比。
2、对数据做分层处理,历史日志数据通过SLS投递到OSS,实时日志存入AnalyticDB。
3、利用DLA对数据做汇聚和ETL处理,并将统计结果放在AnalyticDB上存储。

业务价值:
1、玩家链路实时监控,提高游戏体验,达到千万DAU
2、用户精细化实时运营,T+1->实时,客户留存率提升30%
3、实时渠道统计,节省约200万/月广告成本
3.png

 

分享:

 

 

原文链接
本文为阿里云原创内容,未经允许不得转载。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/514815.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

微服务学习专栏

文章目录一、 Springboot 开源项目推荐1. SmartAdmin2. SPTools3. el-admin4. RuoYi-Vue5. mall6. OA系统开源一、 Springboot 开源项目推荐 1. SmartAdmin 项目地址:https://gitee.com/lab1024/smart-admin 2. SPTools 项目地址:https://gitee.com/52…

云原生时代,应用架构将如何演进?

简介: 如何借助云原生技术来提升交付速度?云原生时代背景下,研发的关注点又会有哪些转变?阿里云高级技术专家许晓斌通过本文分享从 IaaS 上云时代到 PaaS 上云时代的应用架构演进方向,以及云原生技术与应用架构演进的关…

Serverless 对研发效能的变革和创新

简介: 对企业而言,Serverless 架构有着巨大的应用潜力。随着云产品的完善,产品的集成和被集成能力的加强,软件交付流程自动化能力的提高,我们相信在 Serverless 架构下,企业的敏捷性有 10 倍提升的潜力。 作…

查看mysql服务的可视化_Prometheus 监控Mysql服务器及Grafana可视化

Prometheus 监控Mysql服务器及Grafana可视化、mysql_exporter:用于收集MySQL性能信息。使用版本mysqld_exporter 0.11.0官方地址使用文档:https://github.com/prometheus/mysqld_exporter图标模板:https://grafana.com/dashboards/7362下载地…

SprinBoot 集成 Flowable/Activiti工作流引擎

文章目录一、 Flowable工作流引擎1. flow2. flowable3. cims4. RuoYi-flowable5. springboot-flowable-modeler6. flowable-diagram二、Activiti 工作流引擎2.1. RuoYi-Vue-Process2.2. RuoYi-Process2.3. ruoyi-vue-activiti2.4. activiti7-workflow2.5. JeeSite4 JFlow2.6. a…

持续定义Saas模式云数据仓库+实时分析

简介: 从实时分析的价值、场景和数据流程,以及用户对平台能力要求展开,讲述云数据仓库MaxCompute的产品能力优势 ,面对实时分析场景的能力演进要求。进而以实时分析典型场景的全数据流程处理、建模和分析的最佳实践,讲…

超 8 成软件存已知高危开源漏洞,奇安信发布《2021 中国软件供应链安全分析报告》

编辑 | 宋 慧 出品 | CSDN云计算 头图 | 付费下载于东方IC 2020年底,SolarWinds 遭受的大规模网络攻击,使得美国和多国政府在内的 18000 机构被影响。几乎每个月,软件供应链都在遭受黑客攻击。 而从软件端看,“检测发现&#xf…

前后端分离 常用工具汇总

文章目录一、数据框架1. vue2. react二、UI框架2.1. element2.2. element-plus2.3. Ant Design Vue2.4. Ant Design of React2.5. Bootstrap三、工具3.1. Fast Mock3.2. Easy Mock3.3. Mock语法/案例一、数据框架 1. vue https://cn.vuejs.org/ 2. react https://react.do…

Fluid 0.3 新版本正式发布:实现云原生场景通用化数据加速

简介: 为了解决大数据、AI 等数据密集型应用在云原生计算存储分离场景下,存在的数据**访问延时高、联合分析难、多维管理杂**等痛点问题,南京大学 PASALab、阿里巴巴、Alluxio 在 2020 年 9 月份联合发起了开源项目 Fluid。近期我们更新了0.3…

mysql 主从 跳过_mysql主从同步如何跳过错误

mysql主从同步跳过错误的方法:1、跳过指定数量的事务,代码为【mysql>SET GLOBAL SQL_SLAVE_SKIP..】;2、修改mysql的配置文件,通过【slave_skip_errors】参数来跳所有错误。本教程操作环境:windows7系统、mysql 5.6…

模拟驾驶能力输出,赋能客户提升稳定性信心

简介: 模拟驾驶能力输出,赋能客户提升稳定性信心 1.背景 我们技术服务团队经常会遇到这样的状况,随时随地收到紧急电话,开始紧张地排查问题,处理故障以及恢复服务。硬盘故障、网络不通、大量不到终态、水位高、流量激…

微服务如何拆分,能解决哪些问题?

作者 | 修冶来源 | 阿里巴巴中间件头图 | 下载于ICphoto微服务在最近几年大受欢迎,很多公司的研发人员都在考虑微服务架构,同时,随着 Docker 容器技术和自动化运维等相关技术发展,微服务变得更容易管理,这给了微服务架…

Tair持久存储系列技术解读

简介: 阿里云数据库重磅发布自研Tair持久存储系列的产品打破了传统Redis中的数据只能在易失性存储上进行读写的刻板印象,针对客户不同业务阶段的数据存储要求与服务成本考量,全新实现了持久性更强、成本更低的KV数据库。 Redis做为当今主流的…

Serverless X OpenKruise 部署效率优化之道

简介: 相信在不久的将来,SAE 的极致弹性,无论在弹性效率,弹性规模,还是智能精准等方面都会大放异彩。 作者 | 许成铭(竞霄) Serverless 作为云计算的最佳实践、云原生发展的方向和未来演进趋势…

重磅来袭 | 移动云城市峰会分论坛暨移动云TeaTalk青岛站 即将开启

随着大数据技术不断演进和应用持续深化,以数据为核心的大数据产业生态正在加速构建。6月10日,移动云城市峰会将在青岛举办。届时,“云数融通,驱动未来”分论坛暨移动云TeaTalk青岛站 也将同步重磅开启。分论坛将围绕移动云核心数据…

2020阿里云双11--0.73折起,爆款提前抢大促全攻略

2020阿里云双11大促活动于10月24日正式开启,此次双11阿里云将有哪些亮点活动,此篇文章将一网打尽。大家一定要关注,此文会一直更新到活动结束。 从活动页面来看,阿里云双11上云狂欢节活动分为三个阶段: 10月24日-10月…

linux共享软件_为什么 linux 要用 tar.gz,很少用 7z 或 zip?

因为 7z 和 zip 压缩格式都不能保留 unix 风格的文件权限,比如解压出个可执行文件要重新 chmod chown 才能恢复正常。而 tar 格式可以。而 tar 本身不提供压缩,无非就是把包括所有文件的內容和权限拼成一个文件而己,所以用另外如 gzip 格式压…

端应用研发进入云原生时代

简介: 随着技术的发展和各种用户端场景的涌现,业务前台形式变得更加多样,“面向多样化的端场景提供无缝的、一致的数字用户旅程”已经成为了新时代企业应用架构的关键目标,同时它也是当下大前端技术发展背后的核心业务牵引。基于阿…

关于卫星定位,你想知道的一切

简介: 本文将简要介绍卫星定位的原理和应用情况,方便大家对北斗、卫星定位有更多的了解。 5G和北斗,是国之重器。北斗作为卫星定位系统,目前在国际上已处于领先地位,而且已经渗透到我们工作和生活的方方面面。本文将简…

拯救运维工程师,数据链 DNA 来袭!

在《凤凰项目——一个IT运维的传奇故事》一书中讲述运维工程师的常态: A工程师:“是的,我们复制了你给的那个文件……是的,就是1.0.13版……你说那个版本是错的,这话是什么意思……什么?你什么时候把它改了…