头条说数据仓库

说到数据仓库，主要是数据源、数据储存、以及管理，如何对元数据以及质量的管理，分享一些，欢迎大家参与讨论
数据治理是一套持续改善的管理机制，通常包括了数据架构组织、数据模型、政策及体系制定、技术工具、数据标准、数据质量、影响度分析、作业流程、监督及考核流程等内容。
数据控制：在数据管理和使用层面上进行规划、监督和控制。
数据架构管理：定义数据资产管理蓝图
数据开发：数据的分析、设计、实施、测试、部署、维护等工作。
数据操作管理：提供从数据获取到的技术支持。
数据安全管理：确保隐私、保密性和适当的访问权限等。
数据质量管理：定义、监测和提高数据质量。
数据仓库和商务智能管理：实现报告和分析。
文件和内容管理：管理数据库以外的数据
元数据管理：元数据的整合、控制以及提供原始数据。
数据准确性：对外的报表提供反馈机制，对数据准确性进行跟踪，数检平台的整个平台的数据准确性进行监控
时效性：针对数仓的对外提供的数据能否满足失效性的需求，监控数仓任务的运行时长进行优化，能否快速响应业务的数据需求
数据准确一致：定义一致性指标、统一命名规范、统一业务含义、统一计算口径，专业的建模团队
性能指标：通过统一的规划设计，选用合理的数据模型，清晰统一的规范，并且考虑数据的使用场景，使得整体性能更好
需要持续不断的业务逻辑重构，是整体的sql 水平上升，提倡优化精神生活
构建好数据仓库是一个慢工出细活的过程，它不能不做，因为数据治理可以提高整个数仓的管理效率，从而更好的服务业务，数据治理需要一些数据去指导，同理它的成果需要从数据方面去衡量，在整个过程中需要数据去证明它的价值与意义，数仓本身也需要自身的指标去衡量。