自然资源数据仓建设项目需求.docx

《自然资源数据仓建设项目需求.docx》由会员分享，可在线阅读，更多相关《自然资源数据仓建设项目需求.docx（13页珍藏版）》请在第一文库网上搜索。

1、自然资源数据仓建设项目需求1 .项目背景XX市自然资源和规划局组织建设XX市自然资源数据分仓，为各业务应用提 供统一的、共享的数据支撑能力。全面提高XX市空间治理的科学化、精细化和 智能化水平。2 .项目目标按照“省级总仓一市级合仓一县级分仓”共建模式，遵循全省统一的数据管 理办法和归集治理规范，分级开展数据归集、整合。按照“应归集、尽归集”“ 应共享、尽共享”要求，建立XX自然资源分仓，以基础测绘、国土三调、专项 调查等数据为基础，集成各类国土空间数据，实现各类数据的有机融合，筑建权 威、全面、精准的空间底座，真正将XX自然资源分仓打造成为一个全XX市自然 资源大数据管理中心。1、建成数据汇

2、聚中枢。实现基础测绘成果、自然资源调查监测等现状数据、 各类国土空间规划数据、各类自然资源审批监管等管理数据的汇聚。2、二三维一体化。归集XX市已有三维模型数据，通过二三维一体化技术实 现二维与三维GIS技术的无缝融合。3、支撑核心业务协同。通过核心业务数据的数据治理和闭环管理，聚焦核 心业务协同，为国土空间规划编制、成果审查提供服务，为批、供、用、补、查 等用途管制、行政审批提供全方位、全周期服务。3 .项目建设内容按照统一规范，围绕现状、规划、管理数据建立“人造空间、自然空间、未 来空间”三大类的空间数据目录体系，开展数据归集、治理，实现坐标一致、边 界吻合、图数一致、上下贯通、动态更新。

3、完善空间数据需求、归集和共享管理 机制，以“在线归集”为主，“离线汇交” “服务接入”为辅，构建省市县一体 化智能化的数据归集生态；构建全业务类型、全生命周期、全地域覆盖的自然资 源管理类数据库，为实现数据共享、业务协同、闭环管理提供基础支撑。促进数 据资源开发利用，统一数据存储、数据管理、数据交换和数据服务。提供全域、 全要素、全程全方位的“数字空间智能底座”。3.1. 标准规范及管理体系建设需要结合XX市数据归集治理过程、数据制图与图层服务发布、场景建设与 应用推广等工作内容，建设一套XX市空间治理数据分仓建设相关的标准规范及 管理体系。标准规范1）数据归集规范明确XX自然资源数据数据仓建

4、设需归集的数据内容和格式要求，确定数据 归集成果的数据坐标基准，明确各数据图层的数据属性结构。2）数据治理规范应规范XX自然资源数据分仓数据治理里的相关技术要求，包括属性数据治 理、空间数据治理等内容。3）元数据和资源目录标准规范形成统一标准的资源目录和元数据。4）数据建库标准规范规范数据建库、数据归档、数据调用等操作环节的作业规程和内容约束，保 障自然数据仓的数据的权威性和准确性。5）数据更新标准规范编制数据更新规范，保障自然资源数据仓数据鲜活。3.12数据管理机制为保障XX市自然资源数据分仓工作的有效开展以及后续常态化工作的有效 运作，要求形成一套包含数据归集、数据治理、数据更新、数据共享

5、、数据安全 的数据管理机制。3.2. 数据目录体系建设开展XX市自然资源和规划局范围内的现有自然资源和规划数据及数据服务 情况的调研，进行数据资料收集，并对所收集的数据和服务进行梳理分析，分析 各类数据间的层次、类别和关系，对自然资源信息的数据资源进行统一规划，结 合省域空间治理数字化平台数据目录制定统一的数据资源编码与分类体系，建立 统一的自然资源数据资源目录，以此作为数据“共建、共享、共用”的核心，形 成覆盖全面、内容丰富、标准统一、准确权威的自然资源数据目录体系。按照“一数一源”原则确定每类核心数据资源对应的业务管理科室、数据生 产科室、数据更新科室、数据管理科室以及质量维护科室等，以业

6、务管理科室为 数源单位，以业务办理系统为数源系统，建立责任明晰的数据管理责任体系。3.3. 数据归集和治理331 .归集方法数据归集的内容包括现状和规划等版本类数据、审批和监管等动态类数据。 数据归集过程主要包括以下五个阶段。1）前期调研明确数源科室数据归集的内容。确定业务科室需要归集的数据 内容、归集方式（如：汇交、接口推送或ETL抽取等）、归集周期（如：每天、 不定时等），并确定与平台对接的数据库标准规范和数据质量细则，形成双方认 可的中间库数据结构和质量管理要求，在线归集的开发归集接口，并验证归集接 口有效。2）按要求开展数据归集工作。根据确定的归集周期、归集方式，将需要动 态归集的数据

7、内容按标准规范和质量要求推送至数据仓中间库；将需要按版本归 集的数据内容经质检通过后汇交至数据仓。3）数据仓对动态归集数据开展质量管理和质量评估，并将问题反馈数源科 室。基于数据库标准规范和数据质量细则开发配置质量控制程序，利用该程序对 动态归集至中间库的数据开展质量管理服务和质量评估服务，用于发现数据问题 ,并将质量评估结果反馈数源科室。4）数源科室按反馈问题开展数据整改后再提交。数源科室接到问题反馈后， 按数据库标准规范和数5）数据仓将符合要求的成果纳入优质数据库，不符合的成果纳入问题数据 库待整改。数据仓根据数据成果质量情况，将数据仓数据库分为优质数据库和问 题数据库，其中问题数据库中的

8、成果待数源科室整改后再作更新。3.3.2. 归集内容根据实际情况，采用数据库迁移“统管”或者动态视图“引流”的方式实现 数据归集。分析各类自然资源和规划管理主要数据的数据来源、数据格式、坐标 类型、更新周期，明确更新方式后选择通过在线抽取或定期汇交的方式完成数据 的归集。数仓初始建立时进行集中的迁移和引流完成首次归集，后期以增量的方 式实现数据更新。考虑XX目前已归集到一张图系统中的测绘、国土和规划类条线数据，以及 未归集数据，按照条线进行归集，具体归集内容，如下：D测绘地理信息类数据：历年来的遥感影像、地名地址、兴趣点、电子地 图、三维模型数据等，形成版本化基础地理信息数据库，归集方式为离线

9、拷贝。2）资源调查类:政务版的三次全国土地调查以及历年的土地变更调查成果， 形成版本化的资源调查数据库，归集方式为离线拷贝。3）自然资源业务审批管理类：土地、矿产、林业的核心业务数据。具体包 括选址和用地预审、用地审批、土地储备、土地供应、低效用地专项调查、盘活 存量建设用地、设施农用地、用地规划许可、工程规划许可、土地全域综合整治 、执法监查、不动产登记、临时用地、垦造耕地、旱改水、耕地质量提升、非农 化等。根据各类数据源业务系统的网络环境和审批方式，采用离线拷贝和在线抽 取两种不用的归集方式。4）自然资源规划管理类：过渡期的历年城市总体规划、乡镇总体规划、土 地利用总体规划、控制性详细规划

10、、村庄布点规划、各类专项规划和相关重要控 制线。国土空间规划体系下的现行经批准的总体规划、详细规划、村庄规划、专 项规划以及相关重要控制线。3.33数据治理1）测绘地理信息数据治理二维数据治理对归集的二维基础测绘地理数据统一进行脱密变形处理，同时解决变形后数 据和其他未变形数据叠加分析的问题；规范化地名地址、兴趣点、电子地图数据 中字段名称；制作元数据，说明各类数据的时相、范围、数据来源科室以及简要 的数据说明。三维数据治理利用“三维XX”已有实景三维模型数据，按照镇、街道级行政区划范围进 行数据重组织，优化倾斜模型数据在三维场景中的渲染性能。2）国土管理数据治理数据治理工程依据“一数一方案”

11、来开展工作，在本项目中重点聚焦于地块 全生命周期构建所需数据以及由于历史问题造成的管理数据中坐标不正确的数 据。全生命周期数据治理：涉及近三年内用地选址、用地预审、建设用地报批、 土地储备、土地供应、低效用地、规划用地预审、宗地等12类。数据治理工程 主要包括现状问题分析、业务项目补录、数据标准化治理、治理成果质量控制等 内容。历史问题造成的管理数据中坐标不正确问题：涉及近三年由于最初用地红线 坐标转换错误造成的数据，通过问题发现找到问题源数据、坐标重新转换等手段 ,保证数据坐标正确性。 现状问题分析结合数据标准规范，从发现问题、分析问题原因、评估问题影响三方面入手 ,进行单业务环节数据质量问

12、题和多环节数据关联问题分析，将可能存在的问题 识别出。如：阶段数据缺失、坐标偏移、图形飞点、对图形表达的业务内涵不一 致、必填信息丢失、信息填写有误、图数属不一致、空间拓扑等问题。业务项目 补录。统计各业务业务量和各业务阶段数据库的数据量；比较业务办理量和数据库 数量是否一致，如不一致则列出各业务阶段详细的项目清单，进行一一核对；将 未纳入数据库的项目进行补录，重复的予以剔除，保证数据库内项目的完整性。 数据标准化治理在满足空间数据完整性要求的基础上，开展数据标准化治理：根据空间数据 ,比较空间数据对应的关联表信息是否与空间数据表一致且一一关联，如不一致 查看业务表单、扫描件、档案进行补录。根

13、据数据库结构要求，查看数据结构中 字段的名称、类型、值域等信息，是否满足数据库标准要求，如不满足进行内容 标准化；统一数据基础，对坐标系不统一的数据进行坐标转换，对存在图形偏移 的数据进行坐标纠正；保证数据无拓扑错误。 治理成果质量控制依据数据标准规范及质量细则要求，建设数据治理成果验收工具，对数据治 理成果进行质量控制，以满足数据治理的目标要求。质=分类质量项目质量内容质量对象数据完整 性目录及文件规范性是否符合对目录结构和 文件命名的要求。所有电子数据数据格式正确性是否符合规定的文件格式。所有电子数据属性数 据标准 性图层完整性必选图层是否齐备，是 否符合要求。必选图层图层名称是否符合要求

14、。所有图层图层别名是否符合要求。所有图层图层类型是否符合要求。所有图层属性数据结构一致图层属性字段的数量是 否符合要求。所有图层图层属性字段的字段名 称是否符合要求。所有图层图层属性字段的字段别 名是否符合要求。所有图层质量分类质量项目质量内容质量对象性图层属性字段的字段类 型是否符合要求。所有图层图层属性字段的字段长 度是否符合要求。所有图层图层属性字段的字段小 数位数是否符合要求。所有图层代码一致性字段值是代码的字段取 值是否符合要求。字段取值是代码的 图层数值范围符合性字段取值是否符合规定的 值域范围。字段取值是数值的 图层编号唯一性编号字段取值是否唯一。字段取值是编号的 图层字段必填性

15、必填字段是否不为空。所有图层图层内属性一致性检查行政区代码字段值与 行政区名称字段值是否匹 配。所有图层图层间属性一致性所有属性结构表中行政区 代码字段值与行政区划图 层中行政区代码字段值是 否一致。空间数 据基本 要求数据基础坐标系统是否符合数据标 准的要求。所有图层行政区范围除行政区划以外的图层要 素是否超出行政区划范围O所有图层空间图 形数据 拓扑基 本要求面层内拓扑关系互不重叠、互不压盖。所有面图层碎面检查面层是否存在实地小于50 平方米的碎片。所有面图层表格完整性必选表格是否齐备，是否 符合要求。必选表格图层名称是否符合要求。所有表格表格属性字段的数量是否 符合要求。所有表格表格属性字段的字段名称 是否符合要求。所有表格质量分类质量项目质量内容质量对象业务数 据表基 本要求表格数据结构一致 性表格属性字段的字段别名 是否符合要求。所有表格表格属性字段的字段类型 是否符合要求。所有表格表格属性字段的字段长度 是否符合要求。所有表格表格属性字段的字段小数 位数是否符合要求。所有表格代码一致性字段值是代码的字段取值 是否符合要求。