【安防在线 www.anfang.cn】在HUAWEICONNECT2019期间,华为云发布了新一代全场景智能数据湖,助力企业高效管理数据,挖掘数据价值,享受AI时代智能化给企业带来的红利。
华为云新一代全场景智能数据湖
相较于传统的数据库分析系统及业界普遍宣传的以对象存储为底座的数据湖产品,华为云新一代全场景智能数据湖,具有高性价比、敏捷智能应用以及全场景等优势:
■极速:基于华为云多元新架构和多样算力的新一代智能数据湖,具有超高算力,并通过对存储层、大数据引擎的优化,实现30%的系统性能提升。
■敏捷智能:华为云大数据处理引擎具备智能、自学习及自调优的特点。智能数据运营平台DAYU能够实现全流程、可视、支持行业化模板,帮助客户把大数据治理的时间从原来的“周”缩短到“分钟”,实现分钟级敏捷创新。
■全场景:新一代的智能数据湖能够让企业的数据工程师、数据分析师以及数据科学家等多角色在同一个平台上工作,解决了多团队各自为政,多个数据散落在各个团队中,数据需要不断导入导出,无法有效管理的问题。全场景智能数据湖支持统一的索引机制、统一的存储机制、统一的大数据引擎,可以帮助企业多角色在同一平台上工作,无需多次搬运数据,无需处理多种索引,一个平台支持多类业务应用,给企业应用带来极大的敏捷性和便利性。
■全栈高性价比:华为鲲鹏芯片在大数据场景下具有天然的优势:多核带来的更强算力,高集成度以及更大的网络带宽,并内置了压缩、加解密等很多常用算法。华为云新一代智能数据湖服务基于鲲鹏芯片进行了全栈架构优化,通过向量化处理加速,让数据扫描得飞快。通过分级锁架构,扬长避短,减少多线程对于临界资源的随机竞争,更好地发挥了鲲鹏的多核优势,在计算、I/O密集的场景下,可以帮助数据湖服务达到最高性价比。
华为云新一代全场景智能数据湖背后,包括了三个核心的创新技术点。
■统一数据存储、高效计算、智能加速
华为云智能数据湖实现一个平台一份数据支撑企业多角色协同工作,通过将CarbonData和对象存储服务OBS的技术结合,实现一份数据存储多场景应用。通过创新的多级别多维度的索引技术,能够让索引自适应调整,能够一份数据多个索引满足不同的场景,提升了10倍以上的数据存储IO性能。通过CarbonData数据引擎,加速数据的访问和一致性,在业界领先的计算和存储分离架构下,通过支持弹性伸缩,分级存储,竞价实例等,成本可降低高达80%,同时在存储加速,缓存加速,计算引擎加速等多级加速技术支持下,性能高于自建100%。
业界领先的某视频直播厂商,对于性能和稳定性要求极高,迁移到华为云后,相比自建的IDC,性能提升218%。
■数据+AI协同,自动学习,自动调优
通过将AI技术引入大数据引擎,实现自学习大数据引擎。在数据处理过程中,自动感知数据的特点,自动学习,并对大数据处理进行自动调优,进一步提升了大数据性能。
■智能数据运营平台DAYU,加速企业敏捷创新
华为云智能数据运营平台DAYU
华为云DAYU是一站式的数据运营平台,希望为企业提供数据治理的敏捷可视、自助分析、快速开发、全局治理,并能对数据湖中的数据具备高效探索的能力,帮助企业实现数据“找得到,管得住,用得好”。某跨境电商迁移到华为云后,性能上提升100%,成本上降低60%。
截至目前,华为云智能数据湖已广泛应用于金融、医学、物流、互联网、汽车、政府等行业。
该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们。