3月30日,2021(第七届)中国国际大数据大会在北京成功召开。500多位大数据行业嘉宾齐聚一堂,围绕“数字筑基 智见未来”主题,研讨数字经济时代,数字转型的难点与路径;共探“十四五”时期,大数据发展趋势与新机遇!
华为云中国区副总裁胡维琦受邀出席大会并发表 “开发数据商业价值,助力政企数据资产化”主题演讲。同时,华为云数据使能DAYU服务中的FusionInsight MRS云原生数据湖、Data Lake Insight DLI数据湖探索分别荣获“2020年度大数据行业优秀解决方案”奖、 “2020年度大数据行业创新产品”奖,这是业界对华为在大数据领域持续技术创新、实践应用等方面成绩的再度肯定。
图 华为云获2020年度大数据行业奖项
开发数据商业价值,助力政企数据资产化
华为云中国区副总裁胡维琦女士在大会主题演讲中提到,“数据发展重心逐步从关键技术向生产要素演进,在这个过程中,数据资产化并安全流通是商业新机遇。华为云数据使能DAYU服务,助力政企加速把数据资源加工为数据资产,让数据像清洁的水电一样为政企使用,为数据成为整个社会的生产要素打下坚实的基础。”
图 华为云中国区副总裁胡维琦做主题发言
在工业大数据论坛中,华为云专家表示,“工业数字化转型已是全球共识。从我们的实践看来,工业数字化转型的关键在于打通信息物理系统,构筑IT和OT数据融合的工业互联网平台,用AI加持,逐步使能智能制造再升级。“
华为云FusionInsightMRS云原生数据湖斩获“大数据行业优秀解决方案奖”
华为云FusionInsight MRS云原生数据湖,一个架构可持续演进,构建离线、实时、逻辑三种数据湖,助力客户释放海量数据价值,让业务洞见更准,价值兑现更快。
l 离线数据湖:HetuEngine提供秒级交互式查询能力,数据不出湖,分析链路短,性能比Impala快30%+,分析提效10倍+;DLC提供统一的元数据,数据全局可视; HetuEngine提供湖内统一SQL接口:HDFS、Hive、Hbase、ES等,简化用数。
l 实时数据湖:流处理 + Hudi实现数据增量更新入湖,从T+1到T+0; ClickHouse提供毫秒级实时OLAP分析能力;Flink提供FlinkSQL能力,批流SQL接口统一,实现流批一体。
l 逻辑数据湖:HetuEngine提供跨湖、跨仓、跨云统一访问,减少数据搬迁,数据高效流动,全域数据秒级协同分析秒级响应,业务上线效率提升10倍,由“周级”缩短至“天级”。
华为云DLI数据湖探索斩获“大数据行业创新产品奖”
华为云数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。 企业使用标准SQL、Spark、Flink程序就可轻松完成多数据源的联合计算分析,挖掘和探索数据价值。
1) 融合数据湖:一站式的实时分析、离线分析、交互式分析的Serverless融合处理分析服务
• 实时分析:Flink提供FlinkSQL能力,批流SQL接口统一,实现流批一体。
• 离线分析:深度优化的Spark内核,在TPC-DS标准套场景下性能比开源版本快50%+。
• 交互式分析: openLooKeng提供秒级交互式查询能力,性能比Impala快30%+。
2) 容器加持:基于Kubernetes的容器管理技术,满足用户扩缩容和AI分析需求
• 自动扩缩容:根据业务负载,对计算资源进行预估和自动扩缩容。
• 自定义镜像:支持运行Kubernetes生态的用户自定义镜像,便于用户快速构建基于行业库的数据分析能力。
3) 跨源分析:支持跨源统一访问,数据虚拟入湖,逻辑统一访问,免数据搬迁
• 跨源访问: 支持多种数据格式,云上多种数据源、ECS自建数据库以及线下数据库,数据无需搬迁,即可实现对云上多个数据源进行分析,构建企业的统一视图,帮助企业快速完成业务创新和数据价值探索
• 算子下推:将算子下推到数据源进行计算获取到更好的性能,减少跨源分析时经过网络的数据量