云原生数据基础设施 释放数据要素价值
2021年是中国十四五计划的开局之年,在《中央关于制定国民经济和社会发展第十四个五年规划和二〇三五年远景目标的建议》中明确提出:“要推进数据要素市场化改革、加快数字化发展”,从而将数据要素提升到一个全新的战略地位。
如何激活数据要素潜能,推进网络强国建设,加快建设数字经济、数字社会、数字政府,以数字化转型整体驱动生产方式、生活方式和治理方式变革,是数字中国最为艰巨的任务。而推动数据要素价值转换自然离不开云原生数据基础设施的支持。其中,以存算分离、支持多协议的弹性文件存储、高效的近数据计算技术为代表,新技术应用将助力不同行业企业用户最大程度释放数据价值。
大数据技术最初的形式是计算和存储,强调的就是数据贴近计算,技术核心是HDFS+MapReduce数据管理方式,如今,大数据技术有了进一步发布,从计算和存储走向了存算分离设计,从而让Hive、HBase等大数据应用迎来新的发展契机。
以华为云Big Data Pro大数据离线分析解决方案为例,计算、存储单独扩容,因此会减少不必要的资源浪费。华为云Big Data Pro通过存储无感扩容,可消除预留容量浪费,多种协议支持也减少数据多次复制的现象。存算分离,分布式存储跨可用区容灾,使得数据持久度高达12个9,数据可靠性更有保障。
从数据贴近计算到如今存算分离,这种截然相反的变化,大家是不是也会感到奇怪呢?剧情“反转”背后的主要原因是什么?
崔林威表示:存算分离仍然能够满足类似近数据计算的需求,其中很重要的原因是网络技术突飞猛进的发展,这同时也为存算分离提供了基础。不论是近数据计算,还是存算分离并不改变上层HDFS+MapReduce的结构。相比传统方式,华为云BigData Pro在计算存储分离基础上,提供了多协议互通、高可靠等优势。
SFS(Scalable File Service)是一种弹性文件服务,不仅可以提供大数据、文件接口,例如与云内的MRS、DLI等数据分析服务提供存储服务,也可以通过NFS/CIFS协议或者POSIX客户端为云内部署的视频编辑、基因分析、油藏模拟、设计仿真等软件提供数据。
SFS是业界首个支持NFS/CIFS/对象/大数据等多协议接口的存储服务,是一种高性能文件存储(NAS),为基因分析、视频制作/渲染、地球物理、文件共享、内容和Web服务等业务场景提供共享数据访问存储服务。SFS冲破传统NAS只有私有数据存储协议的局限。
例如在视频制作/渲染场景中,华为云与芒果TV探索出了一条更低成本、更实用的制播方案,打造出业界首个基于云服务打造的4K综艺节目——“乘风破浪的姐姐”第二季。
借助SFS混合云解决方案能够兼容对象接口特性,直接将拍摄视频通过对象存储上传到华为云,在云上通过文件接口对视频进行转码、合成、调色、渲染等系列处理后,直接分发到对应播放平台进行播放。节目制作时间缩短了50%,按需付费的云上资源,相对于自建IT系统,节省了90%的初始投资。作为电视机前的观众,可以看到姐姐们清晰的服装细节和每一根睫毛,让电影的质感得以在周期要求高、成本管控严的综艺节目中呈现。
华为面向公有云用户提供数据工坊(Data Workroom)近数据处理服务,可将图像水印、图像转码、视频转码、内容审核、火点发现等数据处理业务,通过数据处理算子市场或者数据处理工作流编排实现近似流水线的操作,如此可大大缩短互联网客户业务开发周期,通过简单的托拉拽即可,也降低了开发/运维难度,效率提升90%。
如今,数据工坊开放算子库中有大量高质量的华为自营算子,也有海量第三方算子,无论是进行图片转码还是视频截帧,你都能轻松找到适用的算子来完成数据处理工作流。通过算子下推技术,在近数据的地方进行数据处理,省去数据在存储与计算直接的传递,数据处理时间缩短50%。
我们即将迎来数据4.0时代,更进一步推动数字经济发展,其特点是从物联网时代的物产生数据升级为将人脑构想、世界里大多并不存在的虚拟空间构成数据,映射到信息空间,数据存储需求将喷涌而出,作为全新的数据载体,云原生数据基础设施将紧随时代发展作出反应变化,在算力、弹性存储为关键指标的元宇宙时代,期待华为云的精彩表现!
盛夏时节,遵化市的夏收夏种工作已经结束,农民抢抓农时进行农作物管护、苗圃修剪等农事活动,田间地头一片忙碌景象。
2022年6月24日,江苏省淮安市复兴镇朱庄村一片近200亩的玉米地迎来丰收。该村种植的玉米全程采用滴灌喷灌和水肥一体化管理。玉米外形小巧玲珑颜色金黄,颗粒饱满口感香糯,下一步将推广规模化种植,促进农民增收致富。
中国邮政发行《水电建设》特种邮票。该套邮票由中国三峡集团共同参与策划,全套2枚,全套邮票面值为2.40元。
2022年6月25日,福建省福清市一都镇后溪,游客在漂流项目游玩。暑期来临,一都镇迎来乡村旅游的游玩高峰,许多游客前来戏水消暑,乐享夏日清凉
2022年6月22日,广东省江门台山市海宴镇沙尾厂村,莲藕丰收季,藕农将采收的莲藕装车销售。
2022年6月21日,新疆伊犁边境管理支队开干沟边境派出所民警深入偏远牧区,扎实开展打击整治养老防范宣传。
2022年6月20日清晨,安徽和县公安局白桥派出所民警携江淮义警,来到李白诗中的天门山脚下,在人员集中的水岸码头、轮渡船上向群众开展长江禁捕宣传,特别是禁用渔具网具对渔业资源的破坏。
2022年6月16日,雨后太阳西下时在海口市与澄迈县老城镇交汇处的天空出现彩虹,随后晚霞又映红天际,渐渐将整个天空披上一层层红蓝色着装,让椰城海口无比灿烂辉煌。
2022年6月15日,位于福建省福安市下白石镇的一家造船厂生产红火,多艘船舶开工建设即将交付。
2022年5月27日,江苏淮安市委巡察机构在盱眙县陡山村开展入户走访调研,详细了解巡察整改情况,收集群众意见建议,充分发挥巡察联系服务群众纽带作用。
今年6月是全国第21个“安全生产月”,中国铁路南昌客运段乘务人员在出乘前严格落实安全生产、疫情防控、消防安全、餐车管理及食品卫生安全检查,加强列车安全管理,确保铁路安全运输,服务旅客平安出行。
2022年6月12日,青海总队执勤支队将特战分队拉练至沙漠地域,开展徒步行军、快速追逃、搏击对抗等课目的实战训练,全面检验和提高队员在恶劣环境下的综合作战能力。
在自治区昌都市八宿县然乌镇,周围遍布美丽的湖泊与宏伟的雪峰,湖泊、田园、雪山与村庄相映成趣,秀美如画。
2022年6月7日,江西省遂川县巾石乡东坑村,随处可见一片片绿油油的稻田,错落有致,不同层次的绿色相互交织,青山、屋舍掩映成景。
2022年6月2日,湖南省常宁市庙前镇泉井村,许广高速公路老屋场特大桥上车水马龙,与农房民居、绿色田园相互映衬,呈现出一副夏日里的乡村生态画卷
2022年6月2日,江西省抚州市南丰县太源乡开展做香包、打糍粑、包粽子、编五彩绳等端午民俗活动,迎接传统佳节的到来。
- 标签:本站
- 编辑:唐志钢
- 相关文章
-
云原生数据基础设施 释放数据要素价值
2021年是中国十四五计划的开局之年,在《中央关于制定国民经济和社会发展第十四个五年规划和二〇三五年远景目标的建议》中明…
-
详细解读主板厂商命名规则——华硕篇
面对目前DIY市场中品牌、型号各异的主板,很多朋友在选择主板时都无从下手
- 即将进入Java后端开发实习岗位的程序员需要掌握哪些知识
- 探索球场外的传奇故事,以NBA球员命名的10件趣事
- 刺猬紫檀和缅甸花梨,这两种红木你会怎么选呢?
- 这幅素描耗时1年半,画完后直接“封神”,网友:眼睛都看不过来
- 傅菁霸气扳手耳环金属感满满,女团造型首饰你学到了吗?美起来吧