统计数据质量
什么是统计数据质量
所谓“统计“是“将原始数据整理转化为二次加工数据或信息的一个过程”。而统计数据的质量,可以理解为“数据的一组品质标志满足用户需求的能力的综合”。在这个定义中,质量的主体是数据,质量的客体是用户,质量控制的本质就是主体满足客体的能力的综合。如果统计数据质量的概念是片面的或残缺的,那么一切统计数据质量的控制方法或改革思路,都可能与提升统计数据质量“南辕北辙”,这也是强调科学界定统计数据质量基本内涵的原因所在。
从三个基本原则上把握统计数据质量的内涵:
1、适用性:是指收集的统计信息是否有用、是否符合用户的需求。统计信息是要为政府、企业以及社会各阶层服务的一种“商品“。因此怎样使统计信息最大化地满足用户,就是保证统计信息适用性的根本。
2、准确性:主要是指统计估算与目标特征值即“真值“之间的差异程度。实际上所谓“真值”是不可知的,一般通过分析抽样误差、范围误差、时间误差、计数误差、加工整理差错、方法误差、人为误差、模型设计误差等影响数据准确性的各个因素,测算统计估算值的变动系数、标准差、曲线吻合度、假设检验偏差等,将统计误差控制在一个可以接受的置信区间内,以保证统计信息的准确性。
3、及时性:主要是指调查基准期与统计数据发布时间的间隔时间。及时性就是缩短统计信息从搜集、加工整理到数据传输的整个过程,缩短调查基准期与数据结果发布时间的间隔时间。另外,应预先公布各项统计数据发布日期,并按时发布数据,建立和规范统计信息发布制度,使用户及时掌握使用统计信息。此外,统计数据质量还包括了可比性、可衔接性、可取得性、可解释性、客观性、健全性、有效性等几个原则。
需要强调的是,统计数据质量是分别从用户、生产者和被调查者三个角度提出来的,它们之间既密切联系,又存在某种矛盾和冲突。如在准确性和及时性、准确性和有效性等方面之间均存在不同程度的冲突。即使对同一个统计数据,不同用户也会提出不同的质量要求,有的可能偏重准确性,有的可能偏重及时性。因此,统计机构需要在统计数据质量各个方面之间不断进行权衡、选择和折中,以达到一个最佳平衡点,来满足用户需求。这就决定了统计数据质量不是一个绝对的、而是相对的属性概念。
统计数据质量的问题及分析
1、数据不实、甚至弄虚作假
这是最常见的统计数据质量问题,也是危害最为严重的数据质量问题。这类统计数据完全是虚构的杜撰的,毫无事实根据。造成统计数据虚假的因素多种多样,比如,有意虚报,瞒报统计数据资料,指标制定不严密,统计制度不完善等。
2、指标数值背离指标原意
这是由于统计工作者对指标的理解不准确,或者是因为指标含义模糊,指标计算的随意性大等原因造成的数据质量问题,表现为收集整理的统计数据不是所要求的统计内容,数据与指标原意出现走样,面目全非。
3、数据的不可比性
它是指同一个指标在不同时期的统计范围、口径、内容、方法、单位和价格上有差别而造成的数据的不可比性。
此外,常见的统计数据问题还有计算错误、笔误等等。造成这些问题的原因主要是:
1)统计观念缺乏创新统计手段和方法不科学,造成统计数据的及时性、准确性、权威性“弱化“,指导决策和服务管理的职能作用“淡化”。
2)统计基础工作薄弱有些基层单位不重视统计工作,统计队伍有失稳定,或统计人员兼任其他多项工作,造成一心多用,严重影响统计工作质量。部分企业单位的基础核算资料、原始记录、统计台帐不健全。甚至有的根本没有原始记录、统计台帐,统计数据缺乏可靠的依据。个别企业原始记录、统计台帐不完善、不规范,凭印象填报数据,有的甚至连报表都没有,靠工作人员估报,统计数据随意性较大,这就更难保证统计数据的准确性。
3)统计队伍素质不高在基层统计人员中存在业务素质偏低,新手多,外行多,复合型人才少,尖子人才少的问题。由于基层统计人员缺乏必要统计基础知识,不能运用科学方法搜集、整理、论证统计数据,仍然沿用过去的统计方法。同时,统计人员社会地位较低,待遇较差,导致一些统计人员缺乏较强的事业心和责任感,造成基层统计队伍不稳,人才外流问题严重,统计岗位调换频繁,还有一些单位根本没有固定的统计人员,临时抽人填报,工作中完全凭感觉、靠估计。
4)盲目追求政绩造成了对数据质量的负面影响通常,人们把工作业绩作为衡量管理者任职期间工作能力的尺度。统计数字作为一定时期经营成果的客观反映,就被赋予了极为特殊的色彩。人为的干扰也可使统计数据的客观性、准确性、真实性受到严重影响。
统计数据质量的控制方法
1、统计数据质量控制的原则应当是全过程的、全员参加的数据质量控制
首先,统计数据质量控制要贯穿于统计工作的全过程。统计数据的质量是统计“过程“的结果,所以必须对统计调查、数据收集、统计核算、统计分析、统计报告、统计服务、统计监督等各个环节,统筹兼顾、系统优化。其次,参加统计数据质量管理和控制的人员应当是全面的。全体统计工作者都要树立数据质量意识,各个主要的工作环节都要落实专人负责。只有人人关心数据质量,大家都对数据质量高度负责,产生优质的统计数据才有坚实的群众基础。
2、统计设计阶段的质量控制
统计设计是统计工作的首要环节,统计数据质量的好坏,首先决定于这个过程,它是提高统计数据质量的前提。如果设计过程的工作质量不好,就会给统计数据质量留下许多后遗症。设计过程的质量控制需要抓好以下几项工作:
1)正确规定统计数据质量标准数据质量标准是指根据不同的统计目的对统计数据精度所提出的要求。满足统计目的精度的统计数据就是准确的,高质量的统计数据。首先要作充分的调查,系统地收集市场和用户对统计数据的反映和实际使用效果的情况;其次要分析研究过去统计数据的主要质量问题,找准统计数据质量控制的主攻方向;最后要进行反复论证,考虑到统计工作中实际能够达到的水平。
2)合理设计统计指标体系及其计算方法统计指标设计得是否合理,也是影响统计数据质量的因素之一。采用统计报表搜集资料,首先要实行标准化管理,制定的指标要符合统计制度的规定,范围要全,分组要准,指标涵义的解释和计算方法要精确;其次要对统计报表的设计、颁发、填制、汇总的全过程实行全面质量管理。
3、资料整理鉴别阶段的质量控制
统计资料整理鉴别阶段出现的差错是统计数据质量问题的重要方面。如果资料不准确,就会影响结论的正确。因此,要特别注意审查资料的可靠性和适用性,要弄清楚统计指标的口径范围、计算方法和时期时点。对于口径不一致或不完整的资料,需要进行调整、补充;对于相互比较的资料,必须要注意有无可比性;一旦发现数据有严重的质量问题,应进行核实,避免有质量问题的资料进入汇总处理阶段。总之,对搜集到的资料,经过鉴别推敲、核实审定、使之准确无误,才能使统计数据的质量得到保证。
4、人为错误的质量控制,大力推进统计信息化建设
依靠先进技术实现统计手段的创新和统计数据“快、精、准”的高质量标准,是统计改革和发展的必由之路。目前,已有许多企业根据实际情况,在企业内部推行统计电算化,一方面减轻了统计人员的劳动强度,提高了工作效率。另一方面,在提高信息传输速度的同时,也使数据质量有了大幅度的提高,真正实现了数据反馈的“准确性和及时性”。
提高统计人员的业务素质。统计人员的业务技术水平,是统计人员在统计岗位上能否顺利有效地开展工作,特别是能否切实履行、充分发挥统计职能的先决条件。要通过统计业务培训,把企业统计练成一支懂得统计理论,能干统计实务,会当领导参谋,既适应市场经济需要,又适应现代化管理需要的具有过硬本领的队伍,杜绝因业务不熟悉而造成的数据质量问题。提高对统计的认识,加大统计执法力度。统计部门今后应重点加大统计执法检查,使统计工作者树立高度的统计法制观念和良好的职业道德,逐步建立健全社会的统计诚信体系。
所谓“统计“是“将原始数据整理转化为二次加工数据或信息的一个过程”。而统计数据的质量,可以理解为“数据的一组品质标志满足用户需求的能力的综合”。在这个定义中,质量的主体是数据,质量的客体是用户,质量控制的本质就是主体满足客体的能力的综合。如果统计数据质量的概念是片面的或残缺的,那么一切统计数据质量的控制方法或改革思路,都可能与提升统计数据质量“南辕北辙”,这也是强调科学界定统计数据质量基本内涵的原因所在。
从三个基本原则上把握统计数据质量的内涵:
1、适用性:是指收集的统计信息是否有用、是否符合用户的需求。统计信息是要为政府、企业以及社会各阶层服务的一种“商品“。因此怎样使统计信息最大化地满足用户,就是保证统计信息适用性的根本。
2、准确性:主要是指统计估算与目标特征值即“真值“之间的差异程度。实际上所谓“真值”是不可知的,一般通过分析抽样误差、范围误差、时间误差、计数误差、加工整理差错、方法误差、人为误差、模型设计误差等影响数据准确性的各个因素,测算统计估算值的变动系数、标准差、曲线吻合度、假设检验偏差等,将统计误差控制在一个可以接受的置信区间内,以保证统计信息的准确性。
3、及时性:主要是指调查基准期与统计数据发布时间的间隔时间。及时性就是缩短统计信息从搜集、加工整理到数据传输的整个过程,缩短调查基准期与数据结果发布时间的间隔时间。另外,应预先公布各项统计数据发布日期,并按时发布数据,建立和规范统计信息发布制度,使用户及时掌握使用统计信息。此外,统计数据质量还包括了可比性、可衔接性、可取得性、可解释性、客观性、健全性、有效性等几个原则。
需要强调的是,统计数据质量是分别从用户、生产者和被调查者三个角度提出来的,它们之间既密切联系,又存在某种矛盾和冲突。如在准确性和及时性、准确性和有效性等方面之间均存在不同程度的冲突。即使对同一个统计数据,不同用户也会提出不同的质量要求,有的可能偏重准确性,有的可能偏重及时性。因此,统计机构需要在统计数据质量各个方面之间不断进行权衡、选择和折中,以达到一个最佳平衡点,来满足用户需求。这就决定了统计数据质量不是一个绝对的、而是相对的属性概念。
统计数据质量的问题及分析
1、数据不实、甚至弄虚作假
这是最常见的统计数据质量问题,也是危害最为严重的数据质量问题。这类统计数据完全是虚构的杜撰的,毫无事实根据。造成统计数据虚假的因素多种多样,比如,有意虚报,瞒报统计数据资料,指标制定不严密,统计制度不完善等。
2、指标数值背离指标原意
这是由于统计工作者对指标的理解不准确,或者是因为指标含义模糊,指标计算的随意性大等原因造成的数据质量问题,表现为收集整理的统计数据不是所要求的统计内容,数据与指标原意出现走样,面目全非。
3、数据的不可比性
它是指同一个指标在不同时期的统计范围、口径、内容、方法、单位和价格上有差别而造成的数据的不可比性。
此外,常见的统计数据问题还有计算错误、笔误等等。造成这些问题的原因主要是:
1)统计观念缺乏创新统计手段和方法不科学,造成统计数据的及时性、准确性、权威性“弱化“,指导决策和服务管理的职能作用“淡化”。
2)统计基础工作薄弱有些基层单位不重视统计工作,统计队伍有失稳定,或统计人员兼任其他多项工作,造成一心多用,严重影响统计工作质量。部分企业单位的基础核算资料、原始记录、统计台帐不健全。甚至有的根本没有原始记录、统计台帐,统计数据缺乏可靠的依据。个别企业原始记录、统计台帐不完善、不规范,凭印象填报数据,有的甚至连报表都没有,靠工作人员估报,统计数据随意性较大,这就更难保证统计数据的准确性。
3)统计队伍素质不高在基层统计人员中存在业务素质偏低,新手多,外行多,复合型人才少,尖子人才少的问题。由于基层统计人员缺乏必要统计基础知识,不能运用科学方法搜集、整理、论证统计数据,仍然沿用过去的统计方法。同时,统计人员社会地位较低,待遇较差,导致一些统计人员缺乏较强的事业心和责任感,造成基层统计队伍不稳,人才外流问题严重,统计岗位调换频繁,还有一些单位根本没有固定的统计人员,临时抽人填报,工作中完全凭感觉、靠估计。
4)盲目追求政绩造成了对数据质量的负面影响通常,人们把工作业绩作为衡量管理者任职期间工作能力的尺度。统计数字作为一定时期经营成果的客观反映,就被赋予了极为特殊的色彩。人为的干扰也可使统计数据的客观性、准确性、真实性受到严重影响。
统计数据质量的控制方法
1、统计数据质量控制的原则应当是全过程的、全员参加的数据质量控制
首先,统计数据质量控制要贯穿于统计工作的全过程。统计数据的质量是统计“过程“的结果,所以必须对统计调查、数据收集、统计核算、统计分析、统计报告、统计服务、统计监督等各个环节,统筹兼顾、系统优化。其次,参加统计数据质量管理和控制的人员应当是全面的。全体统计工作者都要树立数据质量意识,各个主要的工作环节都要落实专人负责。只有人人关心数据质量,大家都对数据质量高度负责,产生优质的统计数据才有坚实的群众基础。
2、统计设计阶段的质量控制
统计设计是统计工作的首要环节,统计数据质量的好坏,首先决定于这个过程,它是提高统计数据质量的前提。如果设计过程的工作质量不好,就会给统计数据质量留下许多后遗症。设计过程的质量控制需要抓好以下几项工作:
1)正确规定统计数据质量标准数据质量标准是指根据不同的统计目的对统计数据精度所提出的要求。满足统计目的精度的统计数据就是准确的,高质量的统计数据。首先要作充分的调查,系统地收集市场和用户对统计数据的反映和实际使用效果的情况;其次要分析研究过去统计数据的主要质量问题,找准统计数据质量控制的主攻方向;最后要进行反复论证,考虑到统计工作中实际能够达到的水平。
2)合理设计统计指标体系及其计算方法统计指标设计得是否合理,也是影响统计数据质量的因素之一。采用统计报表搜集资料,首先要实行标准化管理,制定的指标要符合统计制度的规定,范围要全,分组要准,指标涵义的解释和计算方法要精确;其次要对统计报表的设计、颁发、填制、汇总的全过程实行全面质量管理。
3、资料整理鉴别阶段的质量控制
统计资料整理鉴别阶段出现的差错是统计数据质量问题的重要方面。如果资料不准确,就会影响结论的正确。因此,要特别注意审查资料的可靠性和适用性,要弄清楚统计指标的口径范围、计算方法和时期时点。对于口径不一致或不完整的资料,需要进行调整、补充;对于相互比较的资料,必须要注意有无可比性;一旦发现数据有严重的质量问题,应进行核实,避免有质量问题的资料进入汇总处理阶段。总之,对搜集到的资料,经过鉴别推敲、核实审定、使之准确无误,才能使统计数据的质量得到保证。
4、人为错误的质量控制,大力推进统计信息化建设
依靠先进技术实现统计手段的创新和统计数据“快、精、准”的高质量标准,是统计改革和发展的必由之路。目前,已有许多企业根据实际情况,在企业内部推行统计电算化,一方面减轻了统计人员的劳动强度,提高了工作效率。另一方面,在提高信息传输速度的同时,也使数据质量有了大幅度的提高,真正实现了数据反馈的“准确性和及时性”。
提高统计人员的业务素质。统计人员的业务技术水平,是统计人员在统计岗位上能否顺利有效地开展工作,特别是能否切实履行、充分发挥统计职能的先决条件。要通过统计业务培训,把企业统计练成一支懂得统计理论,能干统计实务,会当领导参谋,既适应市场经济需要,又适应现代化管理需要的具有过硬本领的队伍,杜绝因业务不熟悉而造成的数据质量问题。提高对统计的认识,加大统计执法力度。统计部门今后应重点加大统计执法检查,使统计工作者树立高度的统计法制观念和良好的职业道德,逐步建立健全社会的统计诚信体系。