全球短讯!数据中心基础支撑系统建设方案

2022-10-25 10:03:37   来源:商业新知网

1.1 支撑系统

1.1.1 集成GIS功能的可视化分析展示系统

1.1.1.1 集成GIS功能的交互式图表设计器

集成GIS功能的 交互式图表设计器基于FLEX开发,适用于Web、Mobile、Pad、RIA等多种支持flashplayer的平台,是一个强大的交互式图表制作工具。交互式图表设计器依赖于强大的BI-SERVER数据引擎来查询数据,并将结果以图表的方式展示给用户。交互式图表设计器集成了GIS地图,能够在GIS地图上展示统计图表。

1.1.1.2 交互式报表设计器

交互式报表设计器支持列表、交叉表和中国式网格表等格式,报表数据可为静态与动态两种方式的企业级报表系统。支持图表混合、数据展开、钻取(跳转)、预警、 Excel 文件的导入导出等主要功能。


(相关资料图)

1.1.1.3 图形化即席查询工具

图形化即席查询是方便用户通过拖拽实现快速查询数据的工具,主要实现结构化数据资源灵活查询查询。

1.1.1.4 交互式图表展示工具

交互式图表展示工具用于显示交互式图表设计器和图形化即席查询工具设计保存的GBRF文件。对进行钻取和关联操作。钻取是指改变维的层次,变换分析的粒度。 关联是指所有设定了该层次的输入项目,都要相应该输出层次的动作。

1.1.1.5 数据源管理访问服务系统

数据源管理访问服务系统是后台支撑部分,完成为交互式图表设置器、交互式报表设计器、图形化即席查询工具等提供高效、准确、安全的数据服务;为用户提供管理业务模型、监控系统状况、跟踪服务日志等功能的平台。

在数据服务方面,数据源管理访问服务系统为交互式图表设置器、交互式报表设计器、图形化即席查询工具等提供通用组件库、虚拟聚合服务、日志记录等核心功能。

在用户服务方面,数据源管理访问服务系统以管理平台的形式为用户提供了权限管理、用户管理、业务建模、日志查询、系统监控等功能。

1.1.1.6 工具支撑软件

1.1.1.6.1 目录资源定位引擎

目录资源定位引擎实现的资源目录的匹配查找和定位,其目录资源定位引擎的Referral特性 是目录服务器的一种机制,如果目录服务器设置了这种机制, 在客户端 对 目录服务器 进行 LDAP定位 操作 时 ,如果 在本目录服务器中 没有匹配的对象, 则 返回给客户端 指向其他目录服务器的 LDAP URL , 告诉 客户端返回的 LDAP URL所指向的目录服务器中可能有匹配的对象。 客户端根据需要,对 LDAP URL 所指的另外一台目录服务器进行LDAP定位操作。

根据目录服务器间条目的逻辑关系,分为向上引用和向下引用。向上引用又称“子对父”的引用,是通过在目录服务器中设置来实现的。

1.1.1.6.2 交互式图表引擎

交互式图表引擎包含交互式图形引擎和交互式报表引擎。交互式图形引擎和交互式报表引擎相配合负责展现最终的数据处理结果,能够提供交互式图形和各种形式的报表。提供图形和报表服务器组件,方便用户报表部署、管理、浏览和实时查询等操作。提供完整的报表服务API,实现与应用系统的无缝集成。在制造出专业水平的高质量报表同时,可以为开发商和用户节省大量的开发时间。支持多种数据源,可以透明的生成多种通用格式的报表。

图 4‑8 交互式图表引擎示意图

1.1.1.6.3 多维分析引擎

OLAP 多维分析引擎 展现在用户面前的是一幅幅多维视图。

Ø 维(Dimension):是观察数据的特定角度,是考虑问题时的一类属性,属性集合构成一个维 。

Ø 维的层次(Level):观察数据的某个特定角度(即某个维)还可以存在细节程度不同的各个描述方面 。

Ø 维的成员(Member):维的一个取值,是数据项在某维中位置的描述。

Ø 度量(Measure):多维数组的取值 。

OLAP的基本多维分析操作有钻取(Drill-up和Drill-down)、切片(Slice)和切块(Dice)、以及旋转(Pivot)等。

Ø 钻取:是改变维的层次,变换分析的粒度。它包括向下钻取(Drill-down)和向上钻取(Drill-up)/上卷(Roll-up)。Drill-up是在某一维上将低层次的细节数据概括到高层次的汇总数据,或者减少维数;而Drill-down则相反,它从汇总数据深入到细节数据进行观察或增加新维。

Ø 切片和切块:是在一部分维上选定值后,关心度量数据在剩余维上的分布。如果剩余的维只有两个,则是切片;如果有三个或以上,则是切块。

Ø 旋转:是变换维的方向,即在表格中重新安排维的放置(例如行列互换)。

OLAP系统按照其存储器的数据存储格式可以分为关系OLAP(Relational OLAP,简称ROLAP)、多维OLAP(Multidimensional OLAP,简称MOLAP)和混合型OLAP(HybridOLAP,简称HOLAP)三种类型。

l ROLAP

ROLAP将分析用的多维数据存储在关系数据库中并根据应用的需要有选择的定义一批实视图作为表也存储在关系数据库中。不必要将每一个SQL查询都作为实视图保存,只定义那些应用频率比较高、计算工作量比较大的查询作为实视图。对每个针对OLAP服务器的查询,优先利用已经计算好的实视图来生成查询结果以提高查询效率。同时用作ROLAP存储器的RDBMS也针对OLAP作相应的优化,比如并行存储、并行查询、并行数据管理、基于成本的查询优化、位图索引、SQL的OLAP扩展(cube,rollup)等等。

l MOLAP

MOLAP将OLAP分析所用到的多维数据物理上存储为多维数组的形式,形成“立方体”的结构。维的属性值被映射成多维数组的下标值或下标的范围,而总结数据作为多维数组的值存储在数组的单元中。由于MOLAP采用了新的存储结构,从物理层实现起,因此又称为物理OLAP(PhysicalOLAP);而ROLAP主要通过一些软件工具或中间软件实现,物理层仍采用关系数据库的存储结构,因此称为虚拟OLAP(VirtualOLAP)。

l HOLAP

由于MOLAP和ROLAP有着各自的优点和缺点(如下表所示),且它们的结构迥然不同,这给分析人员设计OLAP结构提出了难题。为此一个新的OLAP结构——混合型OLAP(HOLAP)被提出,它能把MOLAP和ROLAP两种结构的优点结合起来。迄今为止,对HOLAP还没有一个正式的定义。但很明显,HOLAP结构不应该是MOLAP与ROLAP结构的简单组合,而是这两种结构技术优点的有机结合,能满足用户各种复杂的分析请求。

1.1.2 基础支撑系统

1.1.2.1 共享交换体系技术支撑 系统

共享交换体系技术支撑系统包括交换桥接子系统、前置交换子系统、交换传输子系统、交换管理子系统交换体系技术支撑系统 技术架构如下图所示:

交换体系技术支撑系统结构模型图

信息交换系统是整个交换体系建设的核心,通过信息交换系统完成多个部门的信息交换和共享。

随着我国电子政务的逐步推进,各个政务部门都已经建立了相对完善的业务系统,形成了大量的信息资源;各部门的业务又不是相关孤立的,在部门业务办理过程需要多个部门之间的信息资源。

交换桥接子系统可以实现部门业务信息库与交换信息库之间的双向信息同步、多操作系统多数据库支持、结构化数据及非结构化数据支持、增量数据自动识别等功能,同时交换桥接子系统提供图形化的信息交换桥接配置及管理工具,并支持多个桥接任务或服务同时运行和远程部署。

前置交换子系统由交换前置服务器、交换信息库和交换适配器等组成。前置交换子系统与部门业务应用系统之间隔离,保证部门业务信息库和业务应用系统的独立性。

信息交换传输子系统用来构建前置交换子系统之间安全、可靠、稳定、高效的信息交换通道,实现信息的打包、转换、传递、路由、解包等功能。信息交换传输子系统根据部署的交换流程,实现部门前置交换信息库之间的信息处理和稳定可靠、不间断的信息传递。

交换管理子系统实现对整个信息交换过程的流程配置、部署、执行和整个信息交换系统运行进行监控、管理。主要包括交换流程的配置、部署与管理以及对交换系统运行情况的监视与管理两个方面。

为实现主题应用的扩展需要对系统的接入部门与交换指标项进行扩展。本项目提供的信息交换系统产品对平台的接入部门与交换指标项可通过简单的配置、开发即可实现。信息交换系统的扩展设计主要包括接入部门与交换指标项的扩展两部分。

1.1.2.2 目录体系技术支撑系统

目录体系技术支撑系统包括共享信息服务子系统、编目子系统、目录传输子系统、目录管理子系统、目录服务子系统等五个系统,实现目录的编目、审核、发布、目录信息检索、共享信息资源检索功能。目录体系技术支撑系统结构模型如下图所示:

目录体系技术支撑系统结构模型图

共享信息服务子系统用于搭建部门信息资源共享环境,实现共享信息资源的生成、管理与发布、以及信息资源的查询与获取服务。部门信息资源服务系统提供了文件信息资源、数据库信息资源的采集、管理、审核发布功能,为党委系统信息资源体系建设在信息采集、信息发布环节提供技术支撑。

编目子系统对已发布的共享信息资源进行编目。通过提取其基本特征,按照目录体系标准中核心元数据标准、分类标准、资源标识编码标准,实现元数据赋值,形成目录内容,并提供目录内容审核、管理、报送等功能,为党委信息资源体系建设在信息标引环节提供技术支撑。

中心目录管理子系统为目录中心操作人员提供针对汇聚的目录内容进行审核维护和应用主题相关的管理工作。共享信息服务子系统的应用主题维护和应用主题划分功能为党委系统信息资源体系建设在信息组织环节提供技术支撑。

目录服务子系统基于网络实现对目录内容的发布,并向用户提供目录内容的查询,同时用户可以通过目录的核心元数据项中的资源在线链接地址访问/获取信息资源,为党委系统信息资源体系建设在信息标引内容发布环节提供技术支撑。

1.1.3 综合数据采集系统

综合数据采集系统实现对网格化社区内涉及人口、统计、民政、公安、工商等各类数据的即时无纸化数据采集。 综合数据采集系统实现社区人口 、统计、民政、治安、法人、宏观经济 等 综合 数据的一站式、无纸化 的快速 采集 工作,改变以前信息多头采集和采集过程繁琐的情况。

1.1.3.1 数据查询子系统

社区工作人员通过 手持终端 设备登录综合数据采集系统,使用数据查询子系统实现对受访居民或企业涉及人口、人口、统计、民政、公安、工商、质监等多类信息的查询,充分了解受访居民或企业的基本情况。

1.1.3.2 数据采集子系统

社区工作人员利用 手持终端 设备登录综合数据采集系统,通过数据采集子系统录入受访居民或企业的涉及人口、统计、工商、民政、治安、质监等相关业务数据。数据采集子系统实现了基础数据的无纸化、一站式的快速采集,改变过去现场手工纸质记录,然后在集中式数字化录入方式所存在的效率低、错误率高的状况。

1.1.3.3 数据分发子系统

综合数据采集系统的数据分发子系统,将数据采集子系统采集到的各类数据按照事先设定的分发规则进行数据的自动分发。数据分发子系统按照设定的数据分发规则将人口、工商、民政、卫生、公安、质监等多种类型业务数据,按照不同的业务需求发送到相对应的业务系统,完成相应的业务处理流程。

1.1.3.4 系统管理子系统

综合数据采集系统的系统管理子系统,实现对综合数据采集系统的管理功能。系统管理子系统主要实现:

Ø 数据查询、数据采集页面模板的设计和管理;

Ø 数据查询权限管理;

Ø 数据采集数量统计,实现对社区工作人员工作情况的统计汇总;

Ø 数据分发规则的管理。

综合数据采集系统工作流程图

1.1.4 数据比对清洗系统

根据统一的数据标准规范,对各委办局的数据、社区采集数据进行比对和清洗。首先由业务人员和技术人员根据业务和数据特征,制定统一的数据标准和规范,将这些标准用计算机实现为比对校验规则,通过ETL工具将各委办局业务数据和社区采集的数据抽取出来,根据比对校验规则进行比对和清洗,最终将符合标准的数据存入数据中心。

数据比对清洗流程图

关键词: 信息资源 数据采集

上一篇:
下一篇:
精彩阅读

全球短讯!数据中心基础支撑系统建设方案

热点

交互式图表设计器集成了GIS地图,能够在GIS地图上展示统计图表。

要闻速递:与虚拟网红合作是门好生意吗?

热点

在中日韩等国家,虚拟偶像已经极具影响力。这类由电脑生成的角色通常以人类的形象呈现,经常被用于大型品牌和模特活动。

当前讯息:AI绘画本不该逼疯画手

热点

NovelAI出圈的原因,就在于它搞角色类创作,尤其是二次元角色的能力太强大了。

全球今热点:搜狗科学百科将于今年11月11日正式停止服务与运营

热点

搜狗科学百科近日发布停止服务运营公告称,因业务方向调整,搜狗科学百科将于2022年11月11日正式停止服务与运营。

不看颜值?女性优先?揭秘虚拟主播「中之人」背后生意

热点

好看的皮囊千篇一律,有趣的灵魂万里挑一。

焦点热门:Omdia观察:谷歌云正在关闭IoT Core,这对行业意味着什么?

热点

随着越来越多的由人工智能支持的物联网应用进入市场以及新的物联网部署(如环境保护),该领域在在未来几年必然会增长。

Marteker 日报:(2022.10.24)

热点

据国外媒体报道,亚马逊在英国面临集体诉讼,被指控使用「秘密」算法滥用其在在线市场的主导地位。

找准边界,吃定安全 | 梳理传统安全边界,筑牢防护第一基线

热点

保安的角色,几乎完全等同于网络中防火墙的角色。

财富

环球快讯:对话“交个朋友”:罗永浩淘宝首播,但不想当“一哥”

资讯

对话“交个朋友”:罗永浩淘宝首播,但不想当“一哥”,多平台发展是未来。

【全球时快讯】迷你高尔夫娱乐中心Puttshack完成1.5亿美元融资丨海外邦

资讯

迷你高尔夫娱乐中心Puttshack完成1 5亿美元融资丨海外邦,此轮融资将用于进一步扩大美国市场。

每日播报!月薪5万,留不住精英保险代理人

资讯

月薪5万,留不住精英保险代理人,保险围城?

【全球速看料】双十一,老罗想要带动“直男”不容易

资讯

双十一,老罗想要带动“直男”不容易,老罗背后的男人,没有双十一。

今日热闻!从产品经理到“捆绑师”,这个职业全国只有5个人

资讯

从产品经理到“捆绑师”,这个职业全国只有5个人,绳缚师全国只有5个人。

环球热消息:预制菜出海渐成热潮,海外会是中式预制菜的新战场吗?

资讯

预制菜出海渐成热潮,海外会是中式预制菜的新战场吗?,国内预制菜尚处于发展早期,不少企业却已盯上了消费者教育更成熟的海外市场,向海外发力

世界讯息:特斯拉再陷“割韭菜”风波

资讯

特斯拉再陷“割韭菜”风波,特斯拉降价,网友:刚提车就血亏。

全球即时:融资丨「井英科技」完成数百万元种子+轮融资,紫竹小苗基金投资

资讯

融资丨「井英科技」完成数百万元种子+轮融资,紫竹小苗基金投资,本轮资金将用于人工智能(AI)技术和产品研发,以及场景化数字人的建模与扩展

融资丨「飞源新材」完成数亿元Pre-IPO轮融资,洪泰基金投资

资讯

融资丨「飞源新材」完成数亿元Pre-IPO轮融资,洪泰基金投资,本轮融资主要用于第四代新型环保制冷剂及锂电新材料项目建设。

解锁全民健身新玩法,飞镖如何成为室内运动之王?

资讯

解锁全民健身新玩法,飞镖如何成为室内运动之王?,青少年成为了国内飞镖运动发展的主力军。

要闻速递:与虚拟网红合作是门好生意吗?

在中日韩等国家,虚拟偶像已经极具影响力。这类由电脑生成的角色通常以人类的形象呈现,经常被用于大型品牌和模特活动。

当前讯息:AI绘画本不该逼疯画手

NovelAI出圈的原因,就在于它搞角色类创作,尤其是二次元角色的能力太强大了。

全球今热点:搜狗科学百科将于今年11月11日正式停止服务与运营

搜狗科学百科近日发布停止服务运营公告称,因业务方向调整,搜狗科学百科将于2022年11月11日正式停止服务与运营。

不看颜值?女性优先?揭秘虚拟主播「中之人」背后生意

好看的皮囊千篇一律,有趣的灵魂万里挑一。

苹果举行主题为超前瞻秋季新品发布会 AirPodsPro2正式登场

北京时间9月8日凌晨,苹果举行主题为超前瞻的秋季新品发布会,在此次发布会上,备受关注的iPhone 14系列新机、新款Apple Watch Ultra以

微软正为Windows12开发新驱动框架 提升新老显卡性能

Windows 12系统可能会在2024年到来,按照正常的节奏,其开发工作应该早已秘密进行。日前,有开发者从Windows 11最新预览版Build 25188中

华盛顿地铁站首次亮相为视障人士扩展旅行路线

5月25日消息,一款旨在帮助视障人士或盲人行人使用公共交通工具的应用程序在华盛顿地铁站首次亮相。该应用程序名为Waymap,旨在为盲人和视

2022年情况又要变了!华硕高管:今年PC恐怕要供过于求

这两年来,由于疫情导致的居家办公及远程教育需求爆发,一直在下跌的PC市场枯木逢春,2021年更是创下了2012年以来的最快增长,然而2022年情

垃圾佬的心头好!西数新款固态盘SN740曝光

对于DIY垃圾佬来说,散片、拆机件、工包……这些名词怕是并不陌生。本周,西数推出了主要供应OEM厂商的新款固态盘SN740。SN740升级到了第五

虚假宣传、误导消费者 倍至冲牙器关联公司被处罚

后来者要想在激烈的市场竞争中立足,如果可以背靠巨头享受大树底下好乘凉的红利,那自然是皆大欢喜,没有这个福气,也大可凭借自己一步一个