5页 智慧环保数据集成平台设计方案
VIP专享
第 29卷 第 3期
2013年 6月
中国环境监测
Environmental Monitoring in China
VoIJ 29 N0.3
Jun.20l3
污染源普查数据集成与共享平台研究与实践
李 顺 ,王利强 ,虞朝 晖 ,孙 强 ,黄 明祥
环境保护部信 息中心 ,北京 100029
摘 要:应用数据仓库、商务智能等信息技术对第一次全国污染源普查数据进行 了整理集成,设计开发了普查数据的共
享平 台,并对数 据共享与服务 的技 术保 障体 系进 行 了研究。平 台采 用资源 目录和标准数据 集的方 式对普查数 据资 源进
行组织,并设计 了数据资源的获取、发布以及申请定制等共享服务流程。平台技术保障体系主要包括数据成果的分类分
级、发布 策略 、管理流程 、质量控 制规 范等 。
关键 词 :污染源普 查 ;数据集成 ;数据共享 ;平 台
中图分类 号 :X830.7 文 献标 志码 :A 文章编 号 :1002.6002(2013)03.0143—05
Study and Practice on Data Sharing and Integrating Platform of China Pollution Source Census
LI Shun,WANG Li-qiang,YU Chao-hui,SUN Qiang,HUANG Ming—xiang
Environmental Information Center of MEP,Beijing 1 00029,China
Abstract:Data of China Pollution Source Census is cleaned and integrated by applying information technology,such as data ware-
housing,business intelligence etc,and the author has finished data sharing and service platform based on that data meanwhile
data sharing and service technical support system has been studied. Census data has been organized as resource directory and
standard data set style,and the service processes to obtain、publish and apply are designed on the platform.The platform technol—
ogy system m ainly includes four parts: data classification、releasing strategy、management process and quality control specifica—
tions.
Key words:China pollution source census;data integration;data sharing;platform
环境数据资源是国家重要的基础性、公益性
和战略性的资源。整理、规范环境数据资源,推
进环境信息资源共享是社会经济发展和科学创
新工作的需要 ,也是“十二五”国家环境保护工
作 的重 要 内容 … 。 国 内外 关 于 数 据 共 享 服 务 相
关 的研究 比较 分散 ,且 主要集 中在微观 的 ,技术
细 节 方 面 。宏 观 的 、围 绕 政 府 主 导 的 数 据 共 享
服务体系总体技术架构、数据资源体系化管理
方面的研究相对较少。国内在数据资源共享领
域最大的两个体系分别是国信办推动的政务信
息资源共享和科技部推动的国家科学数据共享
工 程 。 二者 依 托 的 网 络 、共 享 的 数 据 内容 不 同、
服务的对象也不同,技术路线也有区别,但在数
据资源的组织和标准化体系建设方面思路基本
一致 。
笔者依托 “三大体 系建 设 ”重 大专项 ‘国
家环境信息与统计能力建设项 目”,对国家环境
收稿 13期 :2012—03—08;修订 日期 :2012-07-03
作者简介 :李 顺 (1975一),男 ,山东东平人 ,博 士 ,高级工程师
数据共享与服务 体系进 行 了比较 系统 地研究 ,提
出国家环境数据共享与服务体系概念和技术框
架 。国家 环境数据 共 享与服 务 体系 的数 据资
源的构建采用标准数据集的方式,管理和组织以
资 源 目录 和元数据 为 主线 。数据 资源 获取 主要 通
过数据中心 门户的 目录体 系导航 、数据搜索 、元数
据查询等方式 实现 。各级环 境数据中心结构 化的
数据集实体的构建适合应用信息资源规划
(IRP) 、主 数 据 管 理 (MDM) 、面 向服 务 的体
系架构(SOA) 等信 息工程 理论方 法。2008年
开展的第一次全国污染源普查是重大的国情调
查 ,全 国共 获 得 各 类 污 染 源 填 报基 本 数 据 11亿
个 ,总信息量 3.1TB lo]。文章 主要依托 污染源普
查数 据集 成与 共 享 平 台项 目,对 国家 环 境数 据 共
享与服务体系中环境数据资源规划、数据集构建
与数据资源组织、数据资源门户建设等关键技术
进行 了研 究和实 践 。
中 国 环 境 监 测 第 29卷 第 3期 2013年 6月
1 研究 目标
“污染 源 普查 数 据 集 成 与 共 享 平 台”项 目研
究 目标是应用数据仓库、商业智能等信息技术,
整合集成普查基础及汇总数据(包括工业污染
源 、生 活 污 染 源 、农 业 污 染 源 、集 中 治 理 设 施
等 )、普 查 与环 境 统 计 对 比分 析 结 果 数 据 、普 查
与排 污 申报 对 比分 析 结 果 数 据 以及 由此 衍 生 的
各 层 次 数 据 成 果 ,设 计 制 作 各 类 标 准 化 的污 染
源普查数据集产 品,研究并开发污染源普查数
据 集成 与 共 享 平 台 ,为 环 境 决 策 、管 理 、科 研 工
作 提供 数 据 支 持 服 务 ,推 进 普 查 数 据 的共 享 和
应 用 。
2 主要研究与建设 内容
2.1 平 台架构 设计 与功 能设计
污 染源普 查数 据集 成与共 享平 台建设 主要 实
现对普查数据的管理、共享与服务能力(包括通
过 标准 数据 服务接 口对 第三方 应用 系统 的应 用支
撑能力 ),平 台总体架构如 图 1。
图1 污染源普查数据集成与共享平台总体技术架构
普查数据通过数据抽取转换,从普查数据生
产环境 (第 一次全 国污染源普 查办公室 普查数据
填 报 系统 ) ,进 入 普查 数 据 集 成 与共 享平 台交
换 数据 库 ,再 通 过 ETL过 程 进 入基 础 数据 库 。通
过构建 普查 数据 分析表 达指 标 、维 度 ,数 据 由基础
数据库 进人 数 据 仓 库 。其 中交 换 数 据库 、基 础数
据库采用 IBM DB2数据库 管理系统软 件支撑 ;数
据仓库 采用 IBM Data Warehouse软件 支撑 ;指标 、
维度 设 计 及 报 表 设 计 采 用 IBM Cognos Business
Intelligence软 件 支 撑 ;数 据 门 户 各 项 功 能 基 于
J2EE架 构 自行开发 设计 。
通过平 台门户 ,系统主要提供如下功能 ,见表 1。
表 1 污染源普查数据集成与共享平台主要功能设计
主要功能 功能描述
数据集查询检索
数据集浏览
数据集下载
数据集审批
‘数据集上传
数据集制作
资源 目录管理
平 台维护
通过资源目录、模糊查询 、组合查询、元数据查询等检索平台可共享的数据集。
用户根据自身权限浏览数据集内容(元数据信息、实际数据集实体信息等)
用户根据 自身权限浏或审批结果下载所需要的数据集
用户对数据集获取申请 或制作申请进行审批
用户根据自身权限上传可共享的数据集
按照数据集制作 申请利用平台提供的数据指标或其他数据资源加工制作新的数据集
资源 目录维护 :增加、修改 、移动 、删除等
用户 、权限管 理 ,门 户访 问统计 等
2.2 数据 整理 与数据 集制作
污染源普查数据资源通过标准数据集构建。
标准数据集是指按照一定规则组织起来 的一系列
数据文件和描述数据相关信息文件的集合体,数
据 集 由数据 集实 体 、元 数据 和数据 集说 明文 档 、数
据 集制 作过 程 文 件 四部 分 组 成 。数 据集 实体 :由
一系列 数据 文件 组成 ,是数 据或 图形 的集合 ,也是
数据集的主体。数据文件应按照一定的格式排
列,可 选择 ASCII字符 、数 据库文 件 (dbf、mdb)、
报表文件 以及 图像文 件 (GIF、JPEG等 )等格式 。
基于 SOA封 装 的 Web Service数 据 服 务 接 口,报
表 、专 题 图框 架 (可 以接 收 参 数 显 示 具 体 的数 据
内容 )也是 几种 特 殊 的数 据集 实 体 。平 台支 持 数
据集 实体文 件类 型如 图 2。
摘要:
展开>>
收起<<
µÚ29¾íµÚ3ÆÚ2013Äê6ÔÂÖйú»·¾³¼à²âEnvironmentalMonitoringinChinaVoIJ29N0£®3Jun£®20l3ÎÛȾԴÆÕ²éÊý¾Ý¼¯³ÉÓë¹²Ïíƽ̨Ñо¿Óëʵ¼ùÀî˳£¬ÍõÀûǿ£¬Óݳ¯êÍ£¬Ëïǿ£¬»ÆÃ÷Ïé»·¾³±£»¤²¿ÐÅϢÖÐÐÄ£¬±±¾©100029ժҪ£ºӦÓÃÊý¾Ý²Ö¿â¡¢ÉÌÎñÖÇÄܵÈÐÅϢ¼¼Êõ¶ÔµÚһ´Îȫ¹úÎÛȾԴÆÕ²éÊý¾Ý½øÐÐÁËÕûÀí¼¯³É£¬Éè¼Æ¿ª·¢ÁËÆÕ²éÊý¾ÝµÄ¹²Ïíƽ̨£¬²¢¶ÔÊý¾Ý¹²ÏíÓë·þÎñµÄ¼¼Êõ±...
声明:菜根智库所有资料均为用户上传分享,仅供参考学习使用,版权归原作者所有。若侵犯到您的权益,请告知我们处理!任何个人或组织,在未征得本平台同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。
相关推荐
-
腾讯研究院:工业大模型应用报告VIP专免
2025-04-04 159 -
阿里云:大模型典型示范应用案例集VIP专免
2025-04-04 150 -
AI+Agent创新10大前沿方向与落地实践-杨永强中盛VIP专免
2025-04-08 141 -
2025年智能分析Agent白皮书VIP专免
2025-05-24 159 -
2025年AI落地应用最新工具集
2025-07-12 139 -
智能体落地最佳实践白皮书 2025VIP专免
2025-07-28 134 -
华为重磅!智能世界2035-134页VIP专免
2025-09-19 988 -
腾讯云2025企业级智能体产业落地研究报告-从场景试点到规模化应用实践105页VIP专免
2025-09-23 139 -
DeepSeek给我们带来的创业机会VIP专免
2025-12-27 120 -
腾讯云中小企业AI实战指南
2026-01-23 133
作者:海阔天空
分类:数字化
价格:免费
属性:5 页
大小:567.77KB
格式:PDF
时间:2024-02-27

