理论教育 大存储:为数据资源提供无限可能

大存储:为数据资源提供无限可能

时间:2023-05-25 理论教育 版权反馈
【摘要】:水电大数据平台实现了全流域数据的统一存储,确保了数据来源的唯一性,实现了真正的数据大存储,为大数据分析提供了干净清澈的数据。数据共享平台为大渡河公司云脑、内部个人用户、集团人员和外部人员提供基于水电大数据平台的原始数据服务、加工数据服务及报表数据服务。

大存储:为数据资源提供无限可能

智慧企业如同一个人,云脑是人的大脑,而大数据就是大脑的脑髓,这个人聪明与否就在于脑髓的质量。大数据是智慧企业区别与普通企业的关键所在,高质量的脑髓必定集中存储在大脑的一处,并且按照一定的方式清晰排列以支持大脑的运转。大渡河公司的大数据存储“大”且“集”,大渡河公司通过大存储手段存储了工程大数据、生产大数据、营销大数据和管理大数据,所有大数据经过清洗整洁有序地集中存储于大数据平台。

图22 大渡河公司水电大数据平台

大渡河公司水电大数据平台(如图22)集水电大数据存储、计算、分析、应用等功能于一体。水电大数据平台实现了全流域数据的统一存储,确保了数据来源的唯一性,实现了真正的数据大存储,为大数据分析提供了干净清澈的数据。

数据的来源是大存储的源头,数据的采集是大存储的前提,数据的管理是大存储的必要手段,数据的应用是大存储的目的。大渡河公司水电大数据平台根据数据的“采、存、管、用”分为数据来源层、数据采集层、大数据平台、数据共享平台、数据管理层。

数据来源层:水电大数据平台数据涵盖大渡河公司本部数据、电力生产单位数据、国电集团数据、外部单位数据等各种来源的数据,它们是水电大数据平台数据产生的源泉,同时也从大数据平台获取非自有数据。(www.daowen.com)

数据采集层:大数据采集主要通过大传输体系的数据集成方式将数据来源层的数据采集进入水电大数据平台,同时为数据需求方输送水电大数据平台数据。数据采集层根据数据来源、数据结构、数据时效性的不同提供丰富的采集工具和采集方式,确保数据采集的高效性和准确性。

大数据平台:大数据平台是整个平台的核心层,为大渡河公司提供数据统一存储与计算服务。大数据平台采用“数据库+Hadoop”混合架构,所有数据按照主题域分类存储在数据库和Hadoop中。大数据平台输出丰富的大数据能力:数据检索、智能语音交互、图算法、数据可视化等。

数据共享平台:数据共享平台是数据离开大数据平台的唯一大门,实现数据的统一使用管理,确保数据输出的规范性和安全性。数据共享平台为大渡河公司云脑、内部个人用户、集团人员和外部人员提供基于水电大数据平台的原始数据服务、加工数据服务及报表数据服务。

数据管理层:数据管理的核心功能是确保数据的干净整洁。数据管理为大数据平台提供数据治理、主数据管理和元数据管理等功能,并建立数据标准、数据管理制度和体系保障数据质量。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈