• 祝全国人民新年快乐!

腾讯云发布国内首个云原生智能数据湖产品图谱

云计算 来源:中国科技网 2021年05月14日 1438次浏览 扫描二维码

在没有“数据湖”之前,我们通常将数据抽取和清洗后,放入数据仓库,然后供各种应用调用。进入大数据时代,企业对数据洞察敏捷性的要求不断提升,传统的数据仓库越来越不能满足智能化、灵活化、高性价比的大数据处理需求。“数据湖”闯入了人们的视线。

5月13日,“腾讯云原生智能数据湖”发布会在北京举行。腾讯云在首次对外展示其完整的云端数据湖产品图谱的同时,还推出了两款最新的“开箱即用”数据湖产品——“数据湖计算服务DLC”和“数据湖构建DLF”。

腾讯云大数据产品中心副总经理雷小平表示,数据湖架构已经成为数据智能时代的新趋势,而云则是数据湖最佳的实践场所。腾讯云原生智能数据湖致力于帮助各行各业的客户满足多元化数据分析场景的新需求,激发大数据的潜在价值。

构筑全方位数据湖服务

计算、存储、AI,再加上大数据技术,构成了数据湖。

数据湖存储、数据湖算力调度、数据湖大数据分析、数据湖AI能力,以及数据湖应用和云上基础服务,构成了腾讯云原生智能数据湖产品图谱。基于此,腾讯云可以为大数据用户提供一体化的全方位服务。

对象存储具备的高性能、高可靠性、高可用性,以及高性价比,使其成为数据湖最适合的底座。腾讯云数据湖存储以对象存储COS服务为核心,理论上可以存储任意规模的异构数据,具有高可靠性和高持久性,同时也支持将其他云端数据设施作为数据湖的存储服务,并且具有高性价比。

数据湖算力调度方面,基于腾讯云弹性容器服务EKS,开放的容器化的分析架构让数据分析功能可组合性更强,扩展性更强,资源利用率更高。

数据分析层,腾讯云数据湖既提供半托管的泛Hadoop服务,满足用户自定义需求,也提供全托管的数据服务,便于用户获取海量数据的洞察力。此外,用户还可利用腾讯云提供的数据协作工具对计算服务进行编排和调用,大幅度提升企业数据的便捷性和敏捷度。

特别值得一提的是,针对越来越多的音视图文数据,腾讯云数据湖包含丰富的AI服务, 为图像处理、音频处理、自然语言处理、视频处理等提供有力的数据支撑。在数据应用服务中,腾讯云推出基于数据湖的数据应用服务,比如企业画像、联邦计算、商业智能分析等。

云原生的基础服务为腾讯云数据湖体系提供了有力的保障。

腾讯云还在不断地研发更多的数据湖产品,以完善云原生智能数据湖矩阵。

数据湖“开箱即用”

为了帮助客户快速构建和分析数据湖,腾讯云推出了两款开箱即用的数据湖产品——数据湖计算服务(Data Lake Compute,简称DLC)和数据湖构建(Data Lake Formation ,简称DLF)

数据湖计算服务作为敏捷高效的的数据湖分析引擎,采用无服务器架构设计,用户无需关注底层架构或维护计算资源,使用标准SQL即可完成对象存储服务及其它云端数据设施的联合分析。此外,用户无需进行传统的数据分层建模,大幅缩减了海量数据分析的准备时间,有效提升了企业数据敏捷度。

数据湖构建服务则能帮助用户快速高效地构建企业数据湖技术架构,包括统一元数据管理、多源数据入湖、任务编排、权限管理等数据湖构建工具。同时,借助数据湖构建,用户可以极大提高数据入湖准备的效率,方便地管理散落各处的孤岛数据。

采用腾讯云产品构建数据湖,相比于本地自建大数据集群,数据湖构建时间减少60%,数据分析计算性能提升35.5%,云端数据湖架构投入使用后可使存算数据量增长75%,配合其他大数据服务,在业务峰值期可以节约30%的硬件资源,以及一半的大数据工程师和运维工程师。

原生·智能

以云计算为中心、以数据驱动业务及可组合式数据架构,这是腾讯云着力打造云原生智能数据湖的主要驱动因素和背景。

预计到2021年底,云将承载80%的应用开发和部署。到2025年,全球数据总量将超过160ZB,全球数据总量的近20%将成为影响日常生活的关键数据,近10%将变为超关键数据。为此,企业迫切需要可以利用多个数据源、使用不同的大数据分析技术,快速构建灵活友好的数据架构,解决多元化分析场景的数据需求。

腾讯云原生智能数据湖应势而生。

腾讯云原生智能数据湖,能够很好地扩展计算和存储资源,同时能极大地降低运维管理难度,实现业务灵活部署。

腾讯云云原生智能数据湖具备更高的数据敏捷度、更优的数据性价比、更强的数据智能化能力,可以更好地激发数据业务价值。同时,它天然具备云服务的众多优势,包括多租户的权限管控、存储计算资源弹性伸缩、底层资源免运维、云端服务高可用高可靠、仅需按照使用量付费等。

在应用方面,腾讯云正在积极推动数据湖在政务、工业、零售等领域的大规模落地。腾讯云数据湖体系已服务众多内外部客户,其整体算力弹性资源池已达500万核,存储数据超过100PB,每日分析任务数达1500万,每日实时计算次数超过万亿,能支持上亿维度的数据训练。

作为数智时代的新引擎,云原生智能数据湖能够为用户带来更多的可能性,挖掘更大的数据潜能。


免责声明:
本网站(www.cennr.com)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等)版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。
喜欢 (0)
[]
分享 (0)
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址