金税三期数据治理大数据平台解决方案.pdf

金税三期数据治理大数据平台 资源规划与建设 目 录 01 02 一期平台介绍 二期规划介绍 01 项目概述-整体介绍 全面覆盖 全量提供 深度挖掘 数据融合 数据治理 开放共享 数据唤醒 数据管理一体化工作平台 数据管理工作经验 云计算 大数据 互联网 01 项目概述-建设目标 聚合数据 • 对多来源、多种类涉税数据进行全面采集、整合、规范 ，形成全面可用 的数据资产 统一治理 • 建立统一的数据标准 ，实现数据的统一采集、统一管理、统一应用 开放服务 • 以数据服务超市的形式将数据服务化、可视化 ，实现数据资产的内部统 一、跨部门共享和对外开放 智能应用 • 通过应用创新中心提供灵活、智能的数据应用，实现海量涉税数据的挖 掘应用 01 项目概述-建设原则 01 标准先行 02 融合提升 标准是数据管理工作的基础 ，严格执 与各业务系统科学集成 ，有益补充各 行总局已有的标准规范 ，并在此基础 种数据源 ，建设全局性的数据管理系 上 ，按需完善XX省地税相关标准。 统 ，全面提升数据应用能力。 建设原则 03 开放创新 04 循序渐进 打破数据管理条块分割的限制 ， 数据管理系统内涵丰富，建设工作不可 实现数据资产内部统一、跨部门 一蹴而就 ，应采用 “迭代”模式 ，循序 共享和外部开放的生态环境。 渐进、有条不紊地进行系统的搭建工作。 01 建设内容-整体架构 01 建设内容-一套标准 01 建设内容-仓库技术架构 大数据仓库 内存 Spark 批量 MapReduce 计算 计算 计算 SparkStre 数据 流式 流式 Kafka Storm Kafka MLlib Ma