从食盐估算到统计云计算

时间:2022-07-10 08:03:24

从食盐估算到统计云计算

据说IBM公司早期生产的打孔机曾经在20世纪三、四十年代用在许多国家的人口统计工作中,一台打孔卡,每天竟可完成45万人的资料分析。就在同期,中国政府也进行过一次全国人口普查,由于当时社会动荡不安,大片国土又沦陷日本侵略军之手,要做这件事非常困难,而且也没有打孔机这样的先进设备。除了把统计表格尽可能地层层分发到各地,对无法发表格统计的地区,统计部门则根据该地区食盐用量的多少,来推算人口数,因为一个人每天的用盐量是可以估计的。这样经过逐级统计核算,终于完成了全国的户口统计,确定那时中国人口数为四亿五千万,这个数字一直延用到全国解放。

新中国成立60余年,国家进行了6次人口普查,2011年4月28日,国家统计局了第六次全国人口普查的公报,全国总人口达到1370536875人。从四亿五千万到1370536875,这不仅是统计制度完善的表现,更是统计手段不断提升的结果。

在信息社会全面到来的今天,统计工作不但关系到健全国民经济核算体系,而且对于掌握国情国力有着密切关系。因此,近年来统计数据采集、审核、处理、上报、存储、共享和的信息化建设步伐越来越快。

信息化创造统计新机遇

据了解,从1986年国家统计局计算中心成立开始,统计信息化系统相继承担了多次大型普查数据处理工作任务。从最初提倡的“微机起步”、以小带大 ,之后经过联网直报的发展,逐渐发展到了现在构建统一的核心业务平台。

2010年3月,国家统计局局长马建堂在浙江调研时曾强调,统计工作现代化的根本是实现工作的规范化和统计数据生产过程的信息化。马建堂表示,加快统计信息化建设,关键要抓好报表布置、数据采集、数据处理上报、数据存储共享四个环节的工作。确保各项统计调查工作的标准化、规范化,从而获得真实的原始统计数据,消除中间环节对统计数据的干扰,实现各级统计机构在线共享原始数据,以提高数据的应用效能。

国家统计局数据管理中心许剑毅向记者表示,目前统计信息化面临两个最主要的问题:一是处理信息量大,各项国情、国力调查,社会信息发展信息调查都是海量数据;二是数据处理时效性很强,有些数据往往要在短时期内算出结果来,因此带来了数据的高并发特点。

为了解决上述两大问题,许剑毅介绍说:“国家统计局正在建设统一的核心业务系统,对国家统计局的资源进行整合,在这个系统架构里面采用了IBM Power系统服务器。这套系统架构从登录系统到数据报送完毕整个业务过程中,没有一个单一故障点,能够解决上报数据的安全问题。”

许剑毅表示,依托这套核心业务系统,国家统计局要打造一个“统计云”。“统计系统从上到下是一个庞大的系统,从国家到省、地、县、乡,一直到村有六级系统。各级的统计工作有些是全国统一的,有些是不统一的。以至于各级应用散乱,大家都在建设自己相应的IT系统,这就造成了一种浪费。通过这样一个统一的核心业务系统,我们要为六级系统提供一个‘统计云’,统一各级的应用服务。”

统计云整合上下资源

虽然“统计云”只有三个字,但是实现起来还是有相当困难和风险的。许剑毅坦言:“提出搞统计云,我们一开始也是有风险的,因为没有别人成功实施的案例可以参考,我们也是在摸着石头过河。最初我们对系统的并发处理能力并不满意,但是最后经过调优以后,IBM Power系统的性能发挥出来后,大家的观念才有所改变。其实我们对这个系统还是有信心的,因为我们对整个方案进行了充分的准备和论证,前后花了近一年半的时间。”

国家统计局数据管理中心王洪琛处长表示,国家统计局在构建“统计云”的时候,也面临着如何实现大集中核心资源整合的问题。“为此我们就想到了虚拟化和资源池的建设,实际上在PC服务器这个层面我们已经采用虚拟化的技术实现了服务器整合,并且效果还是不错的。目前,我们规划有四个系统资源池,分别是Web服务器资源池、应用服务器资源池、数据库资源池、存储资源池。”

王洪琛介绍说,在数据库资源池中一共有两台IBM Power595和四台IBM Power780构成,通过IBM虚拟化技术,整个资源池可以在满足现有应用横向扩展需求的同时,将对整个系统硬件资源分配进行调整,在不影响人口普查与企业联网直报两大业务的前提下,配置部分资源用于新增的其他业务。

据许剑毅介绍,虽然全部建设还未完成,但是“统计云”已经在第六次人口普查中得到了应用,整个系统的协调、运算的能力得到了验证。许剑毅相信,随着系统不断完善,“统计云”能够真正实现对资源的整合,统一全国的统计业务。“我们的目标就是,今后任何一个企业无论在什么地方,登录这样一个平台以后,就可以完成数据的报送任务。同时从国家到村每一级的统计人员,当他登录这个平台以后,就可以看到自己所管辖范围内的业务的报送情况,并且在自己的权限内,可以对这些数据进行业务范围内的处理。”许剑毅说。

上一篇:我要“移民” 下一篇:企业转型中信息化的力量