2019年6月4日至5日,由中国信息通信研究院、中国通信标准化协会主办,大数据技术标准推进委员会承办的2019大数据产业峰会在北京国际会议中心隆重举办,阿里云实时计算凭借各项优异测评数据通过数据中心联盟大数据流计算分布式流处理平台基础能力测评,并在现场接受评测颁奖。
“大数据产品能力评测”是由数据中心联盟(DCA)发起的国内大数据领域的产品能力评测体系,被誉为大数据产品发展的风向标。本次大数据产品能力评测将流计算产品纳入评测体系,阿里云实时计算作为国内首批通过大数据产品能力评测的流计算产品,率先成为被数据中心联盟圈定的国内大数据基础平台第一梯队。
阿里云实时计算(Alibaba Cloud Realtime Compute)是一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛应用于流式数据分析、流式数据ETL、流式复杂事件处理等场景。在本次测试中,阿里云实时计算的显著优势体现在以下方面:
低延迟 :阿里云实时计算的基本数据模型是数据流及事件(Event) 的序列,可使用同一套引擎和API接口实现批流统一,因此阿里云实时计算处理数据时,一个事件在某个节点处理完后的输出结果可立即发送到下一个节点进行处理,执行引擎并不会引入额外的延迟,可保障数据处理速度,测试结果可以达到100ms以内的低数据处理延时。
异步 C heckpoint机制 :实时计算采用异步的 Checkpoint 机制来达到任务状态的可恢复性,从而保证数据处理的一致性,所以在处理的主流程上可以做到数据源和输出之间数据完全不用落盘,达到更高的性能和更低的延迟。
Exactly - once语义 :实时计算数据量超出流计算系统处理能力的情况下,采用使数据限流反压的措施保证流计算系统正常运行(不会崩溃或丢失数据),具备容错机制,能够恢复状态数据,保证恰好处理一次,且不影响作业性能。
资源 动态调整 :实时计算产品目前备动态调整资源的能力,资源不足时,可以调大任务的并行度,分配更多的资源;资源充足时,可以缩小任务的并行度,节省资源占用。
部署 兼容 性 :实时计算产品支撑Flink on Kubernetes、Flink on Yarn、Standalone以及本机的部署方式,测试验证了阿里云实时计算具备友好的部署能力和可视化开通能力。
支持乱序数据正确处理 :实时计算支持基于事件时间和系统时间来切分窗口,并且引入了水印机制来处理迟到的数据,水印的偏移大小可以调节。
目前,阿里云实时计算已广泛应用于在线教育、新零售、物联网、城市大脑等行业以及实时推荐、工业IoT、实时预测场景、欺诈检测、实时报表、实时大屏等多业务场景,赢得了各行业用户的高度认可。未来,实时计算将持续优化,以技术与强大支持推动企业向实时化、智能化大数据计算升级转型。
免责声明:本文仅代表作者个人观点,与每日科技网无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
本网站有部分内容均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,若因作品内容、知识产权、版权和其他问题,请及时提供相关证明等材料并与我们联系,本网站将在规定时间内给予删除等相关处理.
精彩推荐
-
采购拿回扣问题,教你一个小妙招,看看怎么做!
2017-09-18 11:09 广告 阅读
-
苦逼的老板,教你一个小妙招,怎么防采购拿回扣!
2017-09-18 11:09 广告 阅读
-
红人新经济平台“天下秀”和“传播易”未来竞争
2022-04-29 17:21:11 更新 阅读
-
尖货爆料!速来【数码预爆台】领取618福利和AI新
2024-06-21 18:33:22 更新 阅读
-
喜获国际设计大奖丨十字勋章减重大师Pro商务背包
2024-06-12 14:04:28 更新 阅读
-
Baseus倍思音频品鉴会:一场产品与技术的对话
2024-05-29 11:13:32 更新 阅读
-
212携手极致军工品质,焕新出发
2024-05-22 21:16:00 更新 阅读
-
第四届全球应用算法BPAA大赛再度升级,增添三大
2024-05-17 17:55:36 更新 阅读
-
三维天地助力实验室质量管理工作无纸化、流程化
2024-05-09 15:35:04 更新 阅读