【数据湖架构】AWS:什么是数据湖

AWS:什么是数据湖

在一个集中的存储库中安全地存储,分类和分析所有数据。

传统的数据存储和分析工具不再能够提供交付相关业务见解所需的灵活性和灵活性。这就是为什么许多组织正在转向数据湖架构。数据湖是一种架构方法,可让您将大量数据存储到中央位置,因此可随时由组织内的不同组群进行分类,处理,分析和使用。由于数据可以按原样存储,因此不需要将其转换为预定义的模式,而且您不再需要事先知道要提交数据的问题。

了解AWS和APN合作伙伴如何帮助企业将大量异构数据迁移到AWS上的数据湖,并快速简便地将其用于重要的业务洞察。

下载电子书

AWS上的数据湖可以帮助您:

收集和存储任何类型的数据,在任何规模,并以低成本

保护数据并防止未经授权的访问

目录,搜索,并在中央存储库中查找相关数据

快速轻松地执行新类型的数据分析

使用广泛的分析引擎进行临时分析,实时流,预测分析,人工智能(AI)和机器学习

数据湖也可以补充和扩展您现有的数据仓库。如果您已经在使用数据仓库,或者正在考虑实施数据仓库,则可以将数据湖作为结构化数据和非结构化数据的来源。

在AWS上构建数据湖

AWS上的数据湖使您可以访问最完整的大数据平台。 AWS为您提供安全的基础架构,并提供一系列可扩展,经济高效的服务来收集,存储,分类和分析您的数据,以获得有意义的见解。 AWS可以轻松构建数据湖并根据您的特定数据分析需求定制数据湖。您可以开始使用其中一个快速入门,或利用APN合作伙伴的技能和专业知识为您实施一个。数据湖可以用作结构化数据和非结构化数据的来源。

数据湖在AWS上的优势

灵活性

以各种方式轻松提取数据,包括利用Amazon Kinesis,AWS Import / Export Snowball,AWS Direct Connect等。使用Amazon Simple Storage Service(Amazon S3)存储所有数据,无论数据量或格式如何。

敏捷

几乎立即部署所需的基础架构。这意味着您的团队可以提高生产力,尝试新事物更容易,项目可以更快地推出。

安全与合规

AWS提供跨设施,网络,软件和业务流程的功能以满足最严格的要求。不断审核ISO 27001,FedRAMP,DoD SRG和PCI DSS等认证环境。

广泛和深刻的能力

几乎可以构建任何大数据应用程序,并支持任何工作量,无论数据量,速度和各种数据如何。随着每年增加50多个服务和数百个功能,AWS提供了在云上收集,存储,处理,分析和可视化大数据所需的一切。

精选的APN技术合作伙伴

Qubole

大数据技术可能非常复杂,需要手动操作。 如果您可以智能地自动执行大数据操作,那么您可以降低成本,使团队更高效,更高效地扩展并降低失败风险。 Demandbase是企业对企业(B2B)公司的定位和个性化平台的创建者,他们使用Qubole和AWS上的数据湖来降低处理和分析数据的管理复杂性和成本。 听听Qubole如何使Demandbase能够实时分析数以万亿计的结构化和非结构化数据行,使他们的数据科学家和数据工程师从一开始就具有生产力。

Talend

加入我们的网络研讨会,了解如何通过一个小型数据团队显着降低分析操作的管理复杂性,并以大型企业的规模和效率运营。

了解如何缩短开发时间并在AWS上进行创新。 在本次网络研讨会上,Beachbody--健身,减肥和肌肉建设家庭锻炼视频的卖家 - 谈论他们在使用Talend迁移到AWS上的数据湖架构时的体验。 Beachbody将描述他们是如何创建一个开放的企业数据平台,让他们的员工访问安全的,管理良好的数据,并提高整个公司的DevOps效率。

加入我们的网络研讨会,了解Talend和AWS如何帮助Beachbody将各种非结构化和结构化数据源迁移到数据湖,缩短开发和测试周期,并解决实时数据常见的复杂部署难题。

Informatica

Informatica智能数据湖管理解决方案使您能够将大量原始数据接收,清理,处理,管理和保护到AWS上的受信任数据库中。 Informatica元数据驱动的人工智能和企业编目功能使分析师等业务利益相关者能够快速发现,分析,准备和保护数据,以获得及时,相关的业务洞察。 简而言之,Informatica使企业能够充分利用AWS上数据湖的力量,释放大数据洞察力,从而推动创新和销售。

Looker

今天的企业运行大数据,由这些数据产生的度量标准需要集中定义,并且可以获得真正的好处。 现在的解决方案是Looker,一个现代化的数据平台,它允许公司的每个人都能够找到并探索他们做出决策所需的数据。 Looker是为诸如亚马逊网络服务(AWS)之类的云平台构建的,允许您直接查询数据湖等现代云数据库。 客户使用Looker进行内部分析,并将数据公开给客户,合作伙伴和供应商。