华奥数据治理咨询在深圳建筑研究院的应用

2022-07-22

背景

（以下简称“深圳市建设科学研究院”）是国有独资企业，集科研咨询、建筑设计、城市规划、质检为一体的综合性服务企业。是高新技术企业，国家建筑节能技术创新企业。 .

长期以来，深圳市建科院在业务发展过程中积累了大量的数据。这些数据包括众多城市规划、绿色检测、建筑设计项目产生的设计报告、设计图纸、过程控制文件、大型公共建筑能耗监测数据、绿色建材检测数据等。这些数据是深院重要的数据资产建筑科学具有不可估量的价值。但是，由于这些数据是由不同的信息系统创建和管理的，数据被锁定在各个系统中，格式和存储方式不同，难以在业务流程中使用。

互联网包含大量建筑、建材、水处理、气候、地址、水文、经济、人文等信息，是建设科学院开展城市、区域规划、绿色建筑所必需的设计等业务。目前，设计人员接到任务后深圳能耗管理系统，提供资料或自行研究，不仅成本高昂，而且无法保证准确性和准确性，而且经常重复工作，导致成本高昂。如果这些主题信息可以每天在互联网上收集起来，提供给设计师参考，无论是时间成本还是人力资源成本都会大大降低。

深圳市建科院希望通过建立数据中心，完成内外部数据整合，建立检索查询系统，为设计人员提供很好的参考。由于这些数据具有类型多、数量大、积累快的特点，必须借助大数据平台建设数据中心。

深圳市建科院根据需求选择ADA作为建设数据中心的基础软件。

业务目标

利用大数据技术构建可存储和检索结构化数据、非结构化数据和地理信息数据的大数据平台；

利用数据集成技术，将建科院历年积累的案例文件（包括规划设计报告、设计图纸等）、建材产品检测数据（建科院具有检测资质）进行整合开展建材产品检测业务）、大规模公共建筑能耗数据（建科院目前对深圳大型建筑能耗进行实时监测，收集大型建筑能耗数据）建筑物实时）等数据，这些数据将存储在大数据平台中；

利用网络爬虫和数据集成技术，整合行业网站上的大量产品、建设计划等信息，以及统计网站上的国民经济统计报告，系统定期从各个网站提取增量信息，这些数据将存储在大数据平台中；

在整合内外部数据的基础上，提供快速检索、统计分析等功能，为科学院工作人员的日常工作提供支持；

搭建建筑行业互联网化运营平台，整合行业资源，拓展业务范围，拓展客户。实现以下业务目标：

构建全公司共享数据中心，实现全公司数据集中，为设计师提供知识管理和设计参考，为公司高管提供决策支持。

搭建建筑行业电商平台，整合行业上下游资源，助力企业拓展业务范围和客户范围。

技术目标

建科院在本项目中的技术目标是引入大数据技术，逐步将公司的应用系统迁移到共享数据中心，为利用大数据技术进行数据分析和改进奠定基础实施和服务水平。

应用架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">

科学院数据中心应用架构

深圳市建科院建筑行业大数据平台项目是基于大数据的数据中心。通过内外部数据整合和数据清洗，形成深圳建科全公司共享数据中心。在数据中心提供以下服务的依据：

为各业务线提供内部工作平台，提升交付能力和服务水平；

提供一个在线工作平台，外部合作伙伴、个体工人和客户通过该平台进行与建筑相关的工作和交易；

提供给中科院客户，通过互联网服务用户，可以很好地满足客户范围的扩大和客户的个性化需求；

提供决策支持平台。公司管理层可以通过对数据中心数据的统计、分析和挖掘，提高决策的科学性和决策速度，更好地面对市场竞争，提升公司的业务能力和品牌。

技术架构

逻辑架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">

外部运营平台是基于数据中心的建筑行业电子商务平台，其参考数据来源于内部数据中心；内部数据中心是全公司数据采集的大数据平台，汇集了公司内部各业务线产生的数据和互联网上的行业相关数据；在内部数据中心的基础上，数据中心支持的应用为内部员工提供各种业务支持应用。外部运营平台和内部数据中心通过防火墙隔开，防止互联网攻击和有害信息进入公司。

数据架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">

源数据包括各种监测数据、项目文件、设计图纸和外部数据。这些数据通过ETL提取、转换和加载，然后输入数据中心，在数据中心提供搜索引擎（提供所有数据）。查询和检索）、推荐算法（根据客户的个性化需求主动向客户推荐数据）、可视化应用（以图形方式展示数据中心数据）、接口API（为外部应用程序提供访问和引用数据的接口）；用户的应用系统基于这些功能运行。

数据中心管理包括数据质量管理、主数据管理、元数据管理和数据安全管理。

ETL 架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">

用于内部数据集成的 ETL 架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">

用于外部数据集成的 ETL 架构

物理架构

620）this.style.width=620;" =0 alt="深圳建筑研究院应用物联网世界网络华奥数据治理咨询"src="">