试论政府统计如何应对大数据时代的到来 (载《中国统计》2013年第九期) 南京市统计局 王国钧 ( 摘要:面对大数据时代的到来,统计部门应该如何与时俱进,实现统计工作的转型升级,是我们面临的一项重要课题。本文论述了大数据时代对政府统计工作的影响,主要包括:适应大数据时代的要求,政府统计必须更新工作理念;把握大数据时代的契机,政府统计必须拓展调查采集渠道;顺应大数据时代的特征,政府统计必须改变工作方式等。在此基础上,论述了政府统计在大数据时代应该如何作为的问题,提出必须要彻底解决开发利用大数据所面临的基本问题,即要以事务公开为大数据开发运用的前提;要以统一关键代码为大数据开发运用的基础。在当前,政府统计部门开发大数据应该把握的三项原则,即先易后难,重点性突破;积极引导,商业化运作;统筹协调,理顺好关系。 关键词: 政府统计 大数据 应对 2013年被媒体称为“大数据元年”。作为以搜集、整理、分析统计数据为主要职责的政府统计部门,面对着汹涌而来的大数据时代,该如何与时俱进,实现统计工作的转型升级,是我们面临的一项重要课题。本文拟对此进行探讨。 一、 大数据时代对政府统计工作的影响 大数据泛指巨量的数据集。笔者认为,所谓“大数据”就是人类在社会经济活动中产生的各种记录(印痕)以及与记录相关的各种量测资料的集合。由于其具有广泛性、海量性、易变性等特征,因而称为“大数据”。这些数据既包含结构化的数据,也包括非结构化的数据;既包括同源异构的数据,也包括异构同源的数据。托马斯?H?达文波特认为,大数据之所以产生,是因为今天无处不在的传感器和微处理器。在普适计算的时代。所有的机械或电子设备都可以留下数据痕迹,这些痕迹表明了它的性能、位置或状态。这些设备和使用它的人,通过互联网互相交流,又形成了另外一个庞大的数据源。当这些数据和来自其他媒体、无线或有线电话、有线电视、卫星等等来源的数据相结合的时候,更加显得庞大无比。目前,政府统计部门所拥有的数据一般为结构化的数据。大数据与政府统计工作的关系十分密切,对于统计的理念、统计的方法、统计来源、统计的运用都将产生深刻影响。这正如 (一)适应大数据时代的要求政府统计要更新工作理念 现行的统计是以统计调查对象报数为主并辅之以调查员上门登记为基本方式的。在这种统计模式下,调查对象要为政府统计付出必要的精力和成本。而大数据时代,政府所需的数据应该是政府统计机构通过运用现代化的信息技术,对调查对象已有的各种印迹进行搜集、加工而获得的各种数据,而调查对象一般不需要为统计另行付出必要的成本。因而,政府统计的工作着力点和重点必将发生转移。随之而来的是,政府统计工作的理念也应该发生转移。即,统计工作的方式要从依靠有目的的调查采集向对现有大数据有目的的分析挖掘转变;调查制度设计上要从以统计机构为中心,向以有需求价值的指标为中心转变。调查主体要从以政府统计机构单兵作战向社会上各机构单位(包括商业机构、研究机构等)联合作战转变。 (二)把握大数据时代的契机政府统计要拓展调查采集渠道 大数据时代的到来,为统计工作开辟了新的统计渠道,充分利用现代信息技术,不仅可以采集到品种(规格)、分类更加翔实、具体的统计信息,而且,时效更加快捷,并可以杜绝统计采集过程中的各种干扰。我们必须牢牢把握这一发展趋势,使统计工作与时俱进,更具科学性。如CPI、社会消费品零售额等统计指标,就完全可以运用有关商业单位的业务记录进行加工获得。 (三)顺应大数据时代的特征政府统计要改变工作方式 “大数据”时代统计工作方式进一步“扁平化”,几乎所有的信息都是信息需求者直接通过对有关的行政记录、业务记录等加工生成,越过了许多的中间环节。统计的分工由过去纵向的层层布置或者加工汇总上报转变为由不同的部门(如统计局、各部委、有关商业机构等)直接按照自身的实际需求进行挖掘整理。这种工作方式,要求我们政府综合统计机构要明确自身的重点,发挥自身的牵头协调作用,充分利用市场规律,把应该由企业去做的商业性数据事情交由其按照市场规则去做。 二、 政府统计在大数据时代应该如何作为 (一) 彻底解决开发利用大数据所面临的基本问题 《华尔街日报》将大数据时代、智能化生产和无线网络革命称为引领未来繁荣的三大技术变革。麦肯锡公司的报告指出数据是一种生产资料,大数据是下一个创新、竞争、生产力提高的前沿。世界经济论坛的报告认定大数据为新财富,价值堪比石油。因此,发达国家纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手。但是,对于大数据的开发运用决非易事。它需要有一定条件,开发大数据不只是政府统计部门的事情,需要国家把大数据开发挖掘问题上升为国家战略的层面,进行统一规划、制定统一标准、协调有关部门通力合作、创造适宜的氛围,才能有条不紊的深入推进,并取得实效。 1、 要以事务公开为前提。开发大数据首先需要我们政府部门、公共和公益部门甚至有关企业(如航空公司、医院等)要将各项业务信息(包括各种行政记录、业务记录)等大数据资源进行及时的、全面的公开,以供社会上一切机构、单位、组织和个人进行开发运用。没有这个前提条件是不可能进行大数据的开发运用的。有专家认为,大数据发展的障碍,在于数据的“流动性”和“可获得性”。美国政府创建了DATA.GOV网站,为大数据敞开了大门;英国、印度也有“数据公开”运动。中国要赶上这样一场大数据变革,各界应该首先开始尝试公开数据、方式与方法。如同工业革命要开放物质交易、流通一样,开放、流通的数据是时代趋势的要求。目前,我国的政务公开活动已经全面推进,并已经取得了一定的成果,但距离大数据开发运用的要求还有很大的差距。即使政府部门之间也还不能做到政务信息资源的共享,有的共享的信息只是汇总资料,无法进行深入的开发。企业特别是国有企业的业务记录的公开,做得还不够,需要有序依法推进。 2、 要以统一关键代码为基础。所谓关键代码,对于自然人来讲就是统一的身份证代码,对于法人来讲就是统一的组织机构代码。这两点对于我国来说,其推进的力度还是比较大的。关键的是要加强对代码的管理,防止因为种种原因(如个别地方吸纳税收等)而出现的一人(自然人、法人)多码,或者出现无人有码、有人无码的问题。另外,代码管理应当与注册管理相结合,不应当出现企业工商注册库,普遍没有法人代码的现象。这已经严重影响了政府统计部门利用企业注册登记部门的行政记录对于企业名录的比对和核实,也影响了统计信息的共享和开发运用。除此之外,当然还有商品代码、地区代码、行业代码等等一系列代码需要统一和规范。 (二) 当前政府统计部门开发大数据应该把握的几个原则 1、 先易后难,重点性突破 大数据涉及面很广,作为政府统计即刻抛开现行的统计制度,另起炉灶,全面依靠对大数据的开发挖掘以获取资料,是不现实的,也是没有这个必要的。同时,大数据的积累,与信息化的运用程度和信息采集的详细程度有着密切的关系。在当前,大数据只能作为政府统计的有益补充和验证。正确的态度是积极应对,主动进取,采取先易后难,实现重点性的突破。在当前,应该先从信息化程度比较高的行业和业务记录比较齐全的部门着手,探讨大数据的开发和挖掘,逐步实现与现行统计制度的验证和接轨。如批发零售贸易和住宿业相对说来,信息化程度比较高,一般的大型超市,都有POS刷卡机,对于零售的情况(零售的时间、品种规格、数量、价格、金额等),有着详细的记录,可以利用现代信息技术进行深度的开发,不仅可以加工出社会消费品零售额的指标,加工出零售商品的具体品种规格,还可以结合天气、气候、时间等因素,利用统计相关分析的方法,挖掘出在什么天气、气候以及时间的条件下的某个品种的变动曲线图,为企业的营销服务,也可为上游企业组织产品生产提供决策依据。沃而玛通过数据挖掘所发现的“啤酒”和“尿布”的统计关联就是反映这种大数据开发的经典案例。再比如,可以利用POS刷卡机所积累的资料分类,计算出商品和服务的消费构成,结合规格品不同时期的价格变化,编制出消费者价格指数(CPI)。再比如,对于市内交通出行统计方面,公交刷卡留下了乘客的乘车记录,利用这些记录可以对出行人数、出行目的地进行分类统计,结合对宾馆住宿的业务记录的关联分析,同时参考天气、节假日等因素还可以挖掘出更深层次的市民出行活动规律来。 2、 积极引导,商业化运作 一般认为,在商贸、经济及其他领域中,决策行为将日益基于数据和分析而作出,而并非基于经验和直觉;而在公共卫生、经济发展和经济预测等领域中,“大数据”的预见能力也已经崭露头角。因此,对于大数据的开发运用是发现商机的重要手段和途径,对于企业等组织的决策是十分重要的。但是如果没有政府部门的支持引导并为之创设良好的挖掘开发的氛围,企业是难以有效开展此项工作的。同时,作为政府统计部门来讲,应当与有关的企业、组织和个人密切合作,以专题项目(如CPI编制专题等)开发为主要形式,对于挖掘运用工作进行商业化运作,以把握大数据时代的数据挖掘的话语权。各级政府统计部门,都应当结合各地的实际情况,梳理出几个专题,以互利共赢的合作方式,进行大数据开发的试点,以总结出经验,迎接大数据时代的全面到来。如美国对于各航空公司的航班信息就推行了全面、实时的公开活动,以供社会上使用。而有一家社会机构就对航班信息进行挖掘,并将挖掘的信息进行公布,如他们公布了各航空公司各航班的正点率,并进行排序,以供旅客选择,结果促进了正点率的提升,而开发挖掘此信息的公司,也提高了网站的点击率,增加了广告的收入,实现了社会效益和经济效益的良性循环,在这过程中,政府没有花一分钱。这个成功的案例值得我们深思和借鉴。 3、 统筹协调,理顺好关系 对于大数据的开发挖掘,必须要统筹兼顾,妥善处理好各方面的关系。一是个体性业务记录保密性要求和宏观性数据挖掘的开放性要求关系。对于个人隐私和商业秘密的保守,是必须要依法坚守的底线。当然涉及到个人和机构的信息并不都是保密的,如果隐去个体资料与具体个体对象之间的对应关系,对于个体资料的开发和公开是没有问题的。如在超市购物,如果只知道是消费者购物的业务记录,而不知道某笔购物项是张三产生,某笔购物项是李四产生的,那么,也就有效的回避了个人隐私的问题。因此,在政务和业务记录公开的过程中,必须要保守秘密,同时,也要通过适当的技术手段将个体秘密资料转化为可以公开的具体资料,以便于社会深入挖掘使用,切不可,因噎废食,或以保密为借口,只公布汇总资料,使社会公众无法进行深度的二次开发运用。二是政府推动与市场运作的关系。政府应当引领大数据时代的发展潮流,推动对大数据的有序开发。主要是制定和修改规则,推动业务记录的公开,鼓励社会团体和个人对于大数据的开发运用。同时,为着政府宏观管理和监督的需要,与有关的社会团体合作,进行大数据的开发,获取有关的统计信息和资料。此外,政府内部各部门更要加强整合,充分实现有关行政记录的公开和深入的开发运用。 〔参考文献〕: [1]涂子沛:《大数据》[M],广西师范大学出版社2012年7月第一版。 [2](英)维克托.迈尔-舍恩伯格等著:《大数据时代》[M],浙江人民出版社2013年第一版。 [3] 邬贺铨:《大数据时代的机遇与挑战》[J],《求是》2013年第三期。 |
|