ENGIE 在 AWS 上建立公共数据中心，加速实现零碳转型

ENGIE 的客户千差万别，从城市到零售客户再到大型公司，甚至更多。公司越来越多地支持客户利用分散资产（包括太阳能电池板和风电场）自行发电的能力。随着 ENGIE 进一步趋向于去中心化，它发现数据处理企业资源规划软件中的系统、应用程序和产品需要更新。公司需要一种统一的数据收集和分析方法来帮助客户管理其价值链。“例如，我们需要使用数据来测量消耗量，并根据天气预报来预测发电量，”指导 ENGIE 数据计划开发和交付的技术团队负责人 Gregory Wolowiec 说。Wolowiec 还列举了各国之间的孤立和不一致的问题：“所有的解决方案在不同的国家/地区都是不同的；组织的不同部分之间没有信息共享。对我们来说，能够在地球上的任何地方以一种精简的方式收集和分享数据变得非常重要。”

ENGIE 的首席数字官 Yves Le Gélard 解释了公司的宗旨：“ENGIE 的可持续性是一切的关键。这就是我们存在的理由。我们帮助大公司和地球上最大的城市尽快向零碳转变，因为这实际上是当今人类面临的头号问题。”

ENGIE 的小组首席数据官 Gérard Guinamand 补充道：“我们在数据方面的战略实际上与我们的宗旨直接相关。如果您希望推动和实现向零碳转型，您首先需要收集关于正在发生的事情的数据。这些数据包括您燃烧了多少二氧化碳，在哪里燃烧，以及这些数据与诸如天气、温度和人口数量等环境问题之间的关系。所有这些数据都需要存储、收集和计算，以便您可以衡量进度并遵循路线图。”

无论 ENGIE 采用何种方法，都需要高度安全性，并且需要符合世界各地的法规。公司在整合概念验证时，与本地和全球云提供商探讨了各种解决方案。“我们确信 AWS 是一个很好的解决方案，原因很多，包括成本模型，尤其是在数据存储方面，”Wolowiec 说。因此，ENGIE 于 2018 年年中开始在 AWS 上开展其大型数据项目。

Wolowiec 将公共数据中心描述为“协作和分布式的数据湖，使 ENGIE 能够存储数据、共享数据并使用数据创造价值。” 它使用 Amazon Simple Storage Service (Amazon S3) 构建，后者是一种对象存储服务，提供行业领先的可扩展性、数据可用性、安全性和性能。该解决方案还使用 Amazon Redshift，这是云中的一项完全托管的 PB 级数据仓库服务，可以在 Amazon S3 数据湖中查询半结构化数据，演示了用于数据仓库存储的智能湖仓方法。

由于解决方案使用 Amazon Redshift，客户可以在其公共数据中心环境中安全地部署数据仓库并使用分析。通过管理公共数据中心上的 Amazon Redshift 集群，可以将公司的业务部门管理员添加到公共数据中心项目中，使其轻松访问 Amazon S3 数据湖中的数据集，并从公共数据中心丰富的数据集目录中构建有价值的见解。公共数据中心使用 Amazon Redshift 进行两种不同类型的数据访问。它使用 Amazon Redshift Spectrum 直接查询公共数据中心的 S3 存储桶，并使用 Amazon Redshift 作为具有自己内部存储的预置数据仓库。“我们依赖 Amazon Redshift Spectrum 功能连接由公共数据中心管理的 Amazon S3 数据湖和 Amazon Redshift 数据仓库”，Wolowiec 说。

公共数据中心中包含的其他 AWS 服务包括 Amazon Kinesis Data Streams (Amazon KDS)，这是一项可大规模扩展且持久的实时数据流服务。使用 Amazon KDS，ENGIE 可以从物联网设备中实时轻松收集、处理和分析流数据，这意味着 ENGIE 可以快速收集信息来用于开发洞察力。AWS Glue — 用于元数据存储库的一项完全托管的提取、加载和转换（ETL）服务，以进一步帮助传输和清理数据。Amazon Athena 是一项交互式查询服务，让您能够轻松的使用标准 SQL 分析 Amazon S3 中的数据，让 ENGIE 业务部门查看数据。ENGIE 还依赖 Amazon SageMaker 从数据中收集进一步见解，后者是一项完全托管的服务，可以帮助开发人员和数据科学家快速构建、训练和部署机器学习模型。

为了方便公共数据中心在全球范围内的顺利采用，ENGIE 提供了加速模板和文档，以帮助其业务部门管理员看到他们收集的数据的价值，并访问分布式数据湖中的数据。公共数据中心还支持高级别的数据治理和安全性。数据生产者可以共享和控制对数据集和工作流的访问，消费者可以请求访问和使用数据。

AWS 服务的集成为 ENGIE 提供了一个安全、敏捷且可扩展的解决方案。现在，不同的业务部门可以按他们需要的方式使用该框架，而不必牺牲任何对运营至关重要的部分。易用性和自动化使 ENGIE 业务部门在 AWS 上构建公共数据中心解决方案后能够快速提高生产率。此外，还有积极的环境影响：ENGIE 利用数据从风电场获取尽可能多的能源，从而帮助提高这一重要可再生能源的效率。“我们提供正确的工具，使实体能够专注于价值创造，而不是花时间处理技术问题，”Wolowiec 说。到目前为止，ENGIE 已收集了公共数据中心中设置的 200TB 数据。

公共数据中心通过实现信息技术和业务用户之间的数据社区，形成了 ENGIE 数据驱动战略的支柱，加快了提高 ENGIE 各级数据素养的速度，并帮助其优化内部流程或创建新的数据驱动服务。现在，所有业务部门都拥有一个独特的解决方案，可以更快地构建数据驱动的应用程序。ENGIE 目前有超过 1000 个项目建立在世界各地的公共数据中心上。公共数据中心提供了一个真正连贯的解决方案，因为它消除了孤岛，并使每个部门都能从平等访问公共框架中受益。

通过新的收集和共享数据的方法，ENGIE 看到了一个改变其业务方式的机会—该公司正在建立一个垂直数据中心来实现这一目标。ENGIE 历来采用自下而上的方法，其业务部门为各自区域的客户提供服务。然而，由于其许多能源服务都是相同的，这导致了不必要的重复工作。“我们的发电活动，尤其是我们的可再生能源发电，在世界各地基本上是一样的，”Wolowiec 说，“我们可以使用公共数据中心在世界各地建立常见使用案例。接下来，我们将推出更多自上而下的方法，特别是针对风电场。”

ENGIE 通过使用 AWS 服务构建其公共数据中心发现了巨大的价值，使其全球业务部门能够以更高效的方式收集、共享和分析数据。ENGIE 的业务部门仍然保持着自主权，但他们现在可以从集中式数据的优势中获益，从类似的使用案例中获得重要的见解，因为他们发现了更新、更有效的方法来为全世界提供能源。