通过相应平台工具汇聚全县内各单位公共数据形成县级数据湖,同时经过数据清洗、转换、融合、治理后高质量的公共数据资源库,并基于相关应用需求构建各类应用基础、主题、专题库,进而形成县级大数据资源中心。
建立县数据湖,用以存储县级各种各样原始数据,并保证湖中的数据可供存取、处理、分析及传输。通过数据采集相关技术手段,面向多类数据源,汇集县委办、监控视频、企事业单位、互联网以及其他各类数据,并统一存储到县数据湖中。
声明:素材来源或整理于网络公开渠道,如有侵权请联系删除。
更多参考公众号:数字化建设方案
利用大数据资源中心数据资源、数据可视化技术以及指挥运营中心的大屏展示设备,构建全县统一的总体态势感知展示窗口,以可视化的方式全面展示全县政务服务、经济发展、市场监管、民众监控、生态环境、交通等方面的关键指标数据,及时感知、掌握全县发展动态。
利用大数据资源中心数据湖中多汇聚的数据以及基础库中的各类基础数据,未来可以根据政务处理、城市管理、社会治理以及经济发展等各方面的实际问题与需求,在资源中心构建各类主题库或专题库并向相关用户开放,为全县的管理与发展提供数据服务支撑。
1、平台架构关系
2、数据支撑子平台*总体架构
数据支撑子平台*数据范围与存储
2、数据共享交换子平台·总体架构
建全县统一的数据共享交换子平台,形成公共数据采集、交换、共享的核心枢纽,并可打通全县各单位间数据资源共享通道,实现双向信息传递(源数据采集&数据应用共享)互通。
数据交换是整个平台的基础,提供系统业务接口接入、交换前置接入、数据采集、交换传输、数据集成、交换管理等功能服务;数据交换通过前置交换系统与各交换部门进行互联;通过数据传输系统各委办的数据资源汇集到数据中心;对汇集到数据中心的数据进行统一加工、处理,并将经过数据治理后的数据中心中的数据交换到各类基础信息库中;服务管理系统将各类基础信息库中的数据进行服务封装和服务发布,提供给各委办或决策分析等系统使用。数据共享交换子平台·技术方案
数据共享交互平台总体架构主要分为基础设施层、数据资源层、支撑层,服务层以及贯穿多层的标准规范体系和安全保障体系。
基础设施层主要是指平台建设运行所需的网络、服务器、存储、安全、虚拟化等基础支撑设施息资源层就是在资源中心所汇聚、沉淀形成的各类数据资源;基础支撑层由平台基础支撑软件构成,是平台稳定运行提供服务的基础交换支撑层是数据资源汇集、处理与服务的核心支撑,通过底层中间件为基础,构建面向上层应用的服务系统标准规范与运维体系贯穿平台的各个层面,用于规范各部分的建设运行和管理,保障平台的顺利建设实施和正常稳定运行。3、数据治理子平台
数据治理子平台·总体架构
数据治理平台覆盖了从标准、设计、采集、开发到使用,再到交付的全数据治理流程,为组织提供了一站式数据治理运营平台,可满足数据共享交换、数据开发、数据运营多种应用场景,并通过构建数据工厂,实现数据治理的标准化、流程化与组件化。
数据治理子平台·功能架构
数据治理平台能够支持多种数据库环境的数据开发功能,实现从数据的采集、加工到数据探索服务的全生命周期管理。并提供数据开发全过程的治理管控能力。
制定配套的数据规范管理流程。包括数据标准的定义、数据标准执行、数据质量检核规则管理、数据质量问题治理、数据模型管理办法、数据交换管理、ETL开发管理规范等工作流程。
数据治理子平台·数据应用开发整体流程
数据治理子平台·可视化、流程化数据开发
支持可视化的程序编排,数据处理流程开发,使程序开发更简便,降低数据开发周期、开发成本;平台提供数据处理各项能力的开发功能,提供包括数据采集、处理、装载、分发、校验等功能开发平台具备执行标准的开源 Hadoop 接口调用能力,以及基于个性化 Hadoop 接口封装能力;根据不同的数据生产环境,具备不同的数据处理能力,可根据自身需求,基于平台扩展自主的数据处理功能可视化程序开发可结合数据标准化体系,整体数据开发流程与标准化管控切实对接。数据治理子平台·统一任务调度
以一个流水线生产为例:传统做法是单条生产线依赖产品的生产工序进行协同生产。在统一开发调度平台可以通过控制中心进行作业命令下发,状态收集进行控制,达到多个工厂,多条生产线的协同调度,实现数据从“采集→加工→对外应用服务”的全生命周期管理。
数据治理子平台·数据质量管理
数据质量管理主要包含对数据完整性、准确性、鲜活性、权威性的分析和管理,并对数据进行跟踪、处理和解决,实现对数据质量的全程管理,提高数据的质量。
数据治理子平台·数据资产管理
通过对数据治理,让数据更加准确、一致、完整、安全,并形成数据资产,让对数据的使用过程更为人性、便捷、智能,从而提升管理决策水平。利用数据资产管理支持对数据的分发、开发、交易等数据嫁接的实现,从而促进数据资产的价值实现。
数据治理子平台·可视化全景数据资产视图
4、统一数据管理与开放门户
统一数据管理与开放门户·构建统一数据管理与应用入口
统一数据管理与开放门户作为信息发布和数据服务的总管理入口,为县各级单位提供信息资源展示、在线信息服务、信息检索等服务;并推动公共数据未来和社会面的数据交互和开放使用,加强政企数据互动,开放创新应用,实现数据智能的社会化应用价值。
门户提供统一的待办工单流转和个人消息提醒功能,通过门户入口实现对业务的协同管理;门户提供统一的权限管理并适配各管理子系统,提供角色互斥配置,实现权限的管、用、审分离;门户实现CA认证、统一身份认证和单点登录。5、统一运维子平台·功能架构
统一运维平台负责对县级大数据资源平台内的所有基础资源,系统模块,系统运行行情况提供整体的监控告警,运维视图、巡检等工具承载,使得可以快速发现县级大数据资源平台上的各种异常,及时发现并告知维护人员,快速恢复,提升平台内外客户感知。
6、平台数据安全管理方案
通过相应平台工具汇聚全县内各单位公共数据形成县级数据湖,同时经过数据清洗、转换、融合、治理后高质量的公共数据资源库,并基于相关应用需求构建各类应用基础、主题、专题库,进而形成县级大数据资源中心。
1、大数据资源中心建设·区域模型设计
2、大数据资源中心建设·数据湖建设
建立县数据湖,用以存储县级各种各样原始数据,并保证湖中的数据可供存取、处理、分析及传输。通过数据采集相关技术手段,面向多类数据源,汇集县委办、监控视频、企事业单位、互联网以及其他各类数据,并统一存储到县数据湖中。
以数据开发工具为基础,构建SRC近源数据层、ODS数据资源层,形成面向全行业的数据基础层;以数据湖为基础,为后续主题、专题建设提供基础数据支撑,同时为上层应用价值发掘提供全面的数据支撑。SRC近源数据层定位在于将原始数据源进行全量映射保存,是外部各类数据进入数据湖的第一步缓冲节点。该层需要汇集县各业务条线数据,数据类型需要涵盖结构化数据、非结构化数据为了构建有效的数据分层治理,构建起逐层递进的数据流转模式,数据湖构建过程中,需要构建ODS源数据层。3、大数据资源中心建设·资源治理流程
1、基础库建设·R口库建设
通过对R口库数据源的全面梳理,利用信息资源平台已归集的R口相关数据,构建全县统一的、以公民身份号位为唯一标识的、可共享的综合R口信息资源库。基于综合R口库,实现全县R口信息的汇聚治理、共享交换和应用服务,为开展跨部门、跨业务、跨区域的R口应用服务和数据共享,以及R口大数据分析、辅助决策等,提供全方位的R口信息支撑。
2、基础库建设·FR库建设
FR库采用统一社会编码作为主键,FR覆盖政府机关、事业单位、企业、社会团体等类别。FR库建立画像数据标签,标签设计分为FR基础主题、财务主题、生命周期主题、信用主题、关系主题、关键人主题6大主题域,数据应用于社会经济统计、FR信用领域、国家经济结构、企业经营情况等方向的分析统计。
利用大数据资源中心数据湖中多汇聚的数据以及基础库中的各类基础数据,未来可以根据政务处理、城市管理、社会治理以及经济发展等各方面的实际问题与需求,在资源中心构建各类主题库或专题库并向相关用户开放,为全县的管理与发展提供数据服务支撑。
1、专主题建设规划·推动政务业务数据协同
2、专主题建设规划·支撑精准社会服务与科学管理
基于信息资源平台的全局宏观数据分析,形成城市级的宏观数据主体分析应用,有效支持领导决策、政策研究以及资源投放
3、专主题建设规划·辅助城市治理高效运行
信息资源平台基于感知层(摄像头,传感器等)的实时事件的感知、研判及传递,形成捕获—响应—处理的联动体系,支撑城市智慧运行
4、专主题建设规划·以数据供给促产业发展
通过平台数据开放应用,形成“公共数据服务社会应用、社会数据反哺公共数据”的良性循环促进机制
1、市场监管
建设全县统一、集中的市场监管大数据应用服务,通过提供基础监管数据库、精准市场日常监管、市场监管信息共享等关键数据指标服务,助力更新市场监管逻辑、消除信息不对称、增强监管合力、解决监管力量落差问题、降低全县市场监管成本。
2、工业应用
建设全县统一、集中的工业大数据应用与展示服务,对全县工业企业与市场相关的研发、生产、销售等数据进行采集、管理、分析,构建产品创新、产品精准营销、产品质量监控等关键指标数据应用服务,为全县工业的发展与工业企业的转型升级提供驱动力。
3、全民健康
建设全县统一、集中的全面健康大数据应用与展示服务,通过汇聚全县医疗与个人健康相关数据,建设全县医疗数据共享、公众健康指数等关键指标数据服务,助力降低医疗成本,预测流行病的爆发,改善全县人民健康状况,提高整体生活质量。
4、惠民资金监管
建设全县统一、集中的惠民资金监管大数据应用与展示服务,通过大数据的精准比对,对资金超时、重复发放和资金互斥等异常情况进行分析,向有关部门提供高效的全面资金监管、违规风险预警等关键指标数据服务,督促对应职能部门纠偏改正并及时查处有关问题,实现监督的可视化、高效率、全覆盖。
5、农业发展
建设全县统一、集中的农业大数据应用与展示服务,汇聚全县农业研究、环境、生产与市场相关数据,构建农村综合信息服务、农业数据监测预警、农业生产环境监测等关键指标数据服务,为指导全县农业生产与制定发展决策提供全面的数据支撑,推动全县农业的快速与高质量发展。
6、领导驾驶舱-指挥大屏
相关标签: