大话云存储,这个“对象”可能无处不在


戳蓝字“CSDN云计算”关注我们哦!

640?wx_fmt=jpeg


文 | pasca

  来源 | 蛋蛋团(ID:dandan_tuan)


大纲

前言

1、Who:谁使用对象存储

2、What:对象存储是什么

3、Why:为什么他们会使用对象存储

4、how to do:应用场景分析

5、总结


前言


对于企业来说,随着计算机和互联网的爆发式发展,其带来的海量非结构化数据存储,无疑成为一个难点。

互联网领域有个著名的“八秒定律”,指的是当用户访问网站时,如果等待网页打开的时间超过8秒,会有超过70%的用户放弃等待。

对于企业来说,放弃等待也可能意味着用户流失,这是不可忍受的。而对于云计算中的细分领域云存储厂商而言,利用“中心化”的云存储助推企业减少上云成本,既实现了企业海量非结构化数据的存储难点。最关键是提高了企业内容分发效率,实现了双赢。


Who:谁使用对象存储


根据IDC近日发表的《世界的数字化从边缘到核心2025》报告中预测,全球每年产生的数据将从2018年的33ZB增长到175ZB,相当于每天产生491EB的数据,而175ZB约等于1.1万亿GB,如果这些数据存储在DVD光盘中,可比那句著名某奶茶的广告语“围起来可绕地球一圈”还要多222倍。

而Gartner分析,2020 年,全球物联网设备数量将达到204亿。

因此,云也成为了新的增长核心,企业不再拘束于传统数据中心,而采用公有对象存储服务。

640?wx_fmt=jpeg

IDC预测,到2025年,49%的全球已存储数据将驻留在公共云环境中。而未来将不再是一座座数据孤岛,大数据和云计算紧密关联,为游离的海量提供智能服务。

企业产生的数据量将占到全球数据总量的60%,将取代消费者成为全球数据量产生的第一大主体,这意味着存放非结构化数据的企业级存储将蓬勃发展,真正实现了“对象”的无处不在。


What:对象存储是什么


企业级存储架构经过了多年发展,不仅性能大幅提升,功能也在向多元化发展。而对于企业而言,成本是一个绕不过去的坎。

数据越来越多,存储量越来越大。而在这其中,还有一个如何去高效利用存储资源高效利用的平衡点。为了更加高效地使用存储资源,从而达到节省成本的目的,逐渐出现了自动分级、去重、压缩等技术,而这些通过被完美的运用到了对象存储。

在对象存储之前,有着块存储和文件存储两种存储类型,块存储两种类型。

640?wx_fmt=jpeg

简单来说,块存储特点是高性能读写,有些数据,是必须在块存储运行的,如数据库。文件存储的特点是共享性高,但是读写性能较慢。

SDN(软件定义网络)可能大家都听说过,但是SDS(软件定义存储)就没几个人知道了。实际上,对象存储的设计原理符合SDS的理念,其特点是低成本、高安全且用户角度上存储池无限拓展。

对象存储是一种网络存储技术,其最大的特点就是将数据与元数据的存储及操作分离,在性能上综合了块存储和文件存储的优势,具备了高性能读写和共享性高的特点。

主要包括对象 (Object)、OSD(对象存储服务器)、文件系统、元数据服务器(Metadata Server,MDS)和网络连接几个组成部分。

而其和块存储最大的区别是只能存储非结构化数据,如音视频文件、压缩包等等。并且如果是传统SAN 或 NAS架构可以应对TB~PB 级存储规模,但当海量数据发展到 PB~EB 级存储规模时,内部组织结构按照树状结构、文件系统形态的传统存储可能就力不从心了。

因此,对象存储服务成为一个很好的选择。


Why:为什么他们会使用对象存储


图灵奖得主Jim Gray :每18个月,新增的数据量等于有史以来数据量之和。

640?wx_fmt=jpeg

如果还是传统架构,对于如此庞大的数据量,无论是任何企业,都只能喊“求放过”。

而其中非结构化数据的内容占据了数据海洋的80%,随着公有云的不断普及,对象存储已经成为传统存储非结构化数据的有效补充,根据计世资讯的报告表明,用户最常用的对象存储服务场景分别为以下:

640?wx_fmt=jpeg

而对于对象存储,主要解决了以下用户以下几点需求:


  1. 冷热分层。即通过标准存储(热数据)和低频存储(冷数据)的存储方式,有效降低存储成本。

  2. 丰富数据处理。存储上云,现在企业不仅仅只是作为单一存储职能。更多的是希望云厂商能够提供一站式的数据管理方案,如音视频/图片的编辑和处理还有水印等功能。这两个资源现在的采集源实在太多,但是某些格式兼容又不是很好。举个例子,如在音视频领域,目前兼容性最好的是H.264+aac的编码方式,然而很多用户上传的确实H.265+aac或者mpeg-4+aac的编码的视频。这直接导致了这种视频不能在浏览器直接观看而必须通过特殊播放器才能支持

  3. 静态资源分发。存储上云,当然不可能只是作为死数据存储就行了,更重要的是如何送到“全世界用户”的终端去让展示。为了减轻源站服务器的压力以及用户更快的访问到热点资源, 而现在云厂商都搭配了对象存储和CDN(内容分发网络),CDN其原理就是以存储换时延,将热点资源下沉,从而降低访问延迟

  4. 容灾备份。尽管我们时常看新闻说某某厂商服务崩溃,但是如果从概率学统计,公有云对象存储的服务不可用时间远远的低于自建IDC或者自建私有云服务。对象存储其自身的三副本和纠删码存储机制也能够保证数据设计持久性达到11个9(七牛云、阿里云等)。同时,云存储还会提供跨区域同步和异地双活等机制来最大限度的保证服务可用性。

640?wx_fmt=png


how to do:应用场景分析


在公有云对象存储领域中,视频监控、相册存储、视频原创、智能IOT等已经成为对象存储中的前四大典型用户。

640?wx_fmt=jpeg

近几年火热的智慧城市,智慧楼宇直接催热了视频监控领域。如果把城市誉为一个人,那遍布城市各个地方的无数摄像头成为了最前沿的传感器,其传输回来海量的监控视频数据对存储也是一场苛刻的考验。

为了保证监控视频向网络化、在线化、智能化还有高清化发展,公有对象存储成为了代替传统SD和NVR本地存储方案的最佳方式。

根据中国带宽发展联盟发布的数据,去年Q4季度国内的固定宽带网络平均速度达到了28.06Mb/s,同比提升47.61%,而4G移动网络的平均速度也达到了22.05Mb/s,同比提升21.29%。

人均带宽的提高,直接影响就是娱乐音视频行业的爆发增长,无论是视频还是图片,都在往高清化发展,目前千元机都能购买到4800w像素的手机以及4K视频的拍摄,无不印证着这一点。

这对于对象存储而言,以视频和图片的企业成为公有云对象存储的top3用户。

例如短视频行业,目前已经成为继直播之后的新风口。对象存储服务可以覆盖视频的生成、上传、处理、 分发和播放在内的各个环节,帮助用户以最快速度实现短视频应用的上线。

640?wx_fmt=png

而且,随着5G的到来,各种IOT智能设备也将呈现不一样的服务方式。目前在物联网领域最大的难点在于数据如何高效的传输和使用。

作为物联网技术的重要组成部分,是感知城市各领域的直接终端,这些终端时时刻刻产生大量非结构化数据。无论是路边的路灯使用状况,还是自动售货机的库存信息。

“万物互联”就在眼前。而存储这些PB甚至ZB的数据不的不运用到海量可扩展的对象存储服务。


总结


对于用户而言,不仅仅希望只把数据存储起来,而且 要能与他们的计算能力相适配,并且希望可以快速地获得计算能力,以实现数据的灵活运用。

对象存储的趋势是往公有云发展,其能够满足随时随地对数据的处理、分析等需求。甚至结合人工智能,对音视频/图片提供鉴黄、OCR识别等服务。最终,充分利用企业数据发展驱动力,结合其他产品,为用户提供一站式数据管理平台。

640?wx_fmt=png


640?wx_fmt=png

福利

扫描添加小编微信,备注“姓名+公司职位”,加入【云计算学习交流群】,和志同道合的朋友们共同打卡学习!


640?wx_fmt=jpeg


推荐阅读:

  • IEEE 回应禁止华为系审稿人;WiFi联盟、蓝牙联盟已恢复华为成员资格;中国计算机学会:暂时中止与IEEE通信学会合作……

  • ARM 发布新一代 CPU 和 GPU,实现 20% 性能提升!

  • 前端开发 20 年变迁史

  • 北漂杭漂的程序员,是如何买到第一套房子?

  • “爱装X”开源组织:“教科书级”AI知识树究竟长什么样?

  • 500行Python代码打造刷脸考勤系统

  • 权游播完了, 你在骂烂尾, 有人却悄悄解锁了新操作……


640?wx_fmt=png真香,朕在看了!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/523511.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

振奋!中国正式进入5G元年;华为5G俄罗斯签下大单;王坚进入工程院院士第二轮评审...

戳蓝字“CSDN云计算”关注我们哦!嗨,大家好,重磅君带来的【云重磅】特别栏目,如期而至,每周五第一时间为大家带来重磅新闻。把握技术风向标,了解行业应用与实践,就交给我重磅君吧!重…

企业实战_01_Redis下载/安装/运行/停止

文章目录一、Redis下载:官方:https://redis.io/二、Redis安装:2.1. 上传redis软件服务器2.2. 解压redis2.3. 进入redis目录,进行redis安装2.4. 执行redis安装测试:2.5. 安装异常处理三、redis 启动、停止3.1. 进入src目…

关于5G,你必须知道的事儿……

戳蓝字“CSDN云计算”关注我们哦!文 | 小枣君来源 | 鲜枣课堂什么是5G 5G,就是5th Generation Mobile Networks(第五代移动通信网络),也可以称为5th Generation Wireless Systems(第五代无线通信系统&a…

java管理员登录_idea实现管理员登录javaweb

mysql创建db_0106数据库,创建表添加一条数据,id int自增,密码:为MD5加密insert into tb_sys values(null,admin,MD5(123),"系统管理员");项目目录结构com.isoft.db包下db.properties文件mysql.drivercom.mysql.jdbc.Dri…

linux环境下redis5.0的安装配置

文章目录一、Redis介绍:二、安装Redis2.1. 下载 解压 进入文件夹 然后 编译2.2. 启动Redis2.2.1. 指定配置文件启动redis2.2.2. 配置redis后台启动三. 登录验证一、Redis介绍: Redis是当前比较热门的NOSQL系统之一,它是一个key-value存储系统…

漫话:如何给女朋友解释什么是编译与反编译

戳蓝字“CSDN云计算”关注我们哦!来源 | 漫话编程某天下班后,我在家里进行电话面试,问到面试者这样一个问题:"你知道使用哪些办法可以反编译Java代码吗?"。但是面试者回答的并不好,所以我在面试评…

企业实战_02_Redis基础

接上一篇:企业实战_01_Redis下载/安装/运行/停止https://blog.csdn.net/weixin_40816738/article/details/99198062 Redis小知识: 向服务器发送命令 ①redis-cli连上redis服务器后,可以在命令行发送指令; ②ping,测试…

Python 爬取 42 年高考数据,告诉你高考为什么这么

戳蓝字“CSDN云计算”关注我们哦!作者 | 徐麟责编 | 伍杏玲封图 | CSDN付费下载于东方IC对于像作者一样已经工作的“上班族”来说,6月7号到9号三天无疑是兴奋到飞起的,终于迎来了令人愉悦的端午假期:然而有那么一群人,…

windows下载、安装运行redis

https://github.com/microsoftarchive/redis/ redis的配置文件: redis.windows.conf

java读取excel某个单元格的值_[转载]Java读取Excel中的单元格数据

目前网上能找到的读取Excel表格中数据的两种比较好的方案:PageOffice好用开发效率高;POI免费。供大家参考,针对具体情况选择具体方案。1. PageOffice读取excelimport com.zhuozhengsoft.pageoffice.*;import com.zhuozhengsoft.pageoffice.ex…

【五分钟】看完一道有装逼解法的算法题

戳蓝字“CSDN云计算”关注我们哦!作者 | 程序员小吴来源 | 五分钟学算法题目来源于 LeetCode 上第 342 号问题:4 的幂。题目难度为 Easy,目前通过率为 45.3% 。题目描述给定一个整数 (32 位有符号整数),请编写一个函数来判断它是否…

企业实战_03_Redis基础命令

接上一篇:企业实战_02_Redis基础 https://blog.csdn.net/weixin_40816738/article/details/99204244 先启动redis服务端,在启动redis客户端 说明命令info查看系统信息ping测试连通性dbsizekey数量keys *查看所有的keyselect 1切换到键空间(keyspace1)…

Docker精华问答 | Docker commit如何用?

Docker 是个划时代的开源项目,它彻底释放了计算虚拟化的威力,极大提高了应用的维护效率,降低了云计算应用开发的成本!使用 Docker,可以让应用的部署、测试和分发都变得前所未有的高效和轻松!1Q:…

java channel源码_Netty 4.0 源码分析(三):Channel和ChannelPipeline

Client和server通过Channel连接,然后通过ByteBuf进行传输。每个Channel有自己的Pipeline,Pipeline上面可以添加和定义Handler和Event。Channel类1 package io.netty.channel;2 import io.netty.buffer.ByteBuf;3 import io.netty.buffer.MessageBuf;4 im…

一拍即合、一见钟情之后,智慧城市的“福利”来啦……

戳蓝字“CSDN云计算”关注我们哦!“未来双方的合作会针对智慧城市、智慧建筑以及智慧地域开发等领域开展创新型的解决方案,这种创造对于目前已经存在的,该领域技术甚至是竞争对手都是一个强大的震撼与颠覆。”达索系统董事会副主席兼首席执行…

Springboot部署到Tomcat,可以不带项目名进行访问

文章目录1. 进入tomcat的conf目录2. 编辑server.xml2.1. 修改第一处2.2. 修改第二处2.3. 发布war包2.4. 浏览器请求2.5. windows样例1. 进入tomcat的conf目录 cd /app/tomcat8081/conf/2. 编辑server.xml Tomcat9使用war包设置默认项目需要设置下server.xml就行 vim server.…

python ndarray append_9-Python-NumPy数组元素的添加与删除

数组元素的添加与删除 相关函数列表如下:函数元素及描述resize返回指定形状的新数组append将值添加到数组末尾insert沿指定轴将值插入到指定下标之前delete删掉某个轴的子数组,并返回删除后的新数组unique查找数组内的唯一元素1)返回指定大小的新数组num…

Java -jar 如何在后台运行项目

演示项目: GitHub链接:https://github.com/gb-heima/java-jar-nohup zip下载链接:https://github.com/gb-heima/java-jar-nohup/archive/master.zip git下载地址: git clone gitgithub.com:gb-heima/java-jar-nohup.git编译打包 …

裁员1700人,IBM 声称内部调整团队;谷歌将以26亿美元全现金收购Looker,绝对大手笔...

关注并标星星CSDN云计算极客头条:速递、最新、绝对有料。这里有企业新动、这里有业界要闻,打起十二分精神,紧跟fashion你可以的!每周三次,打卡即read更快、更全了解泛云圈精彩newsgo go go 贝索斯旗下蓝色起源将登月球…