大型煤炭企业数据质量管控方法研究

苏 发 ，丁剑明 , 杨欢欢

（神东煤炭集团信息管理中心,陕西省神木县,719315）

摘要 对信息系统及其数据管控的目的是，让煤炭企业在生产运输过程中更加安全高效，大幅度减少煤矿生产一线作业人员数量，降低人员劳动强度，改善作业环境，为企业科学管理、正确决策提供依据，进一步促进企业的健康发展，提高企业的核心竞争力。通过对煤炭企业信息系统现状进行充分的调研分析，得出的结论是只有从信息系统使用和系统数据质量两方面同时管控，才能改善系统的应用现状，才能使现有数据更有分析应用价值。通过改进信息系统使用效果促进信息系统的管理水平的提升，通过建立数据质量管控体系，提升企业数据质量管控能力。

关键词: 煤炭企业；信息系统 ； 数据质量 ； 数据质量管控体系

Research on information system and data quality control method

of large coal enterprise

Su fa ,Ding jianming,Yang huan

(Shendong information management center,Shenmu ,Shanxi 719315,China )

Abstract  The purpose of management to the information system and its data is to make that coal enterprise in production and transportation process is more safe and efficient, greatly reduce the amount of coal mine production line workers, reduce staff labor intensity, improve the working environment, provide the basis for scientific management and correct decision for the enterprise, further promote the healthy development of the enterprise, improve the core competitiveness of enterprises. We had come the conclusion from investigation and analysis to the information system of coal enterprise.The methods of improving the application status of the system and making existing data more analytical and useful is the control to the use of information system and the quality of system data at the same time.Improving the effect of using of information system is in order to improve the management level of information system,and establishing a data quality control system is in order that can improve the quality control ability of enterprise data.

Key words:Coal enterprises;Information system ;Data quality;Data quality control system

1  信息系统及其数据管控现状

随着大数据时代的到来，数据分析应用的需求迅速提升，人们才逐渐意识到数据质量管控的重要性，信息系统是数据的重要载体，因此对信息系统的管控也应该纳入数据管理的一部分。

近十几年，信息技术在我国各个行业中的应用都受到了前所未有的重视，“以机械化换人、自动化减人、信息化用人”已成为煤炭企业决策部门的共识，众多煤炭企业在信息化方面都有很大的投人。然而，目前我国煤炭企业的信息化投入还都以系统建设和应用开发为主，信息系统的科学管理尚未得到足够的重视。信息系统管理的目的是确保系统安全、稳定、有序运行，防范应用风险。合理利用信息系统资源，有助于推进企业信息化建设，保障企业信息系统的正常运行，充分发挥信息系统在企业管理中的作用，更好地为企业生产经营服务^[1]。

煤炭企业信息系统主要有两种来源，即统建系统和自建系统，系统的开发一般由外委厂家来完成，系统上线初期由厂家协助管理，后期由企业内部专业人员进行运维。煤炭企业信息系统架构图如图1所示。

图1 煤炭企业信息系统五层架构图

煤炭企业信息系统共分为五层，即决策支持层、经营管理层、生产执行层、控制层、设备层。

决策支持层：通过提供信息、模型和分析工具来帮助管理者制定决策。

经营管理层：将生产执行层数据转换成信息,以监控绩效和管理组织，以可接收的形式向执行者提供信息。

生产执行层：集成煤炭生产相关的各类业务，实现与经营管理层和生产控制层的数据交换。

控制层：计算机直接与传感器、变送器、执行装置相连，实现对现场设备的实时监控并通过通信网络实现与生产执行层的信息交互。

设备层：进行数据采集的传感器、执行机构、摄像头等。

另外，企业的信息系统不仅包括网络、计算机硬件、操作系统、应用软件，更重要的是软件系统所承载的大量数据，在大数据时代要想让企业的数据资产真正发挥作用，必须加大对数据的管控力度，提高数据质量。

康奈尔大学于2010年就成立了研究数据管理与服务组，而我国在数据管理方面起步较晚^[2]，煤炭企业的数据质量管控更是滞后。煤炭企业缺乏专门的信息系统开发人员，数据采集、传输、存储都委托外部企业负责，这些企业之间的标准不统一，再加上数据掌握在其他厂家，煤炭企业完全失去了数据的管控权，企业需要的一些数据必须通过多方沟通，从厂家手里获得，即使有些数据可以获得，由于数据质量较差，进行数据分析和应用的价值也很小，在大数据时代下数据资产已为其他行业创造了很多新的价值，但是煤炭企业由于缺乏对数据的管理，特别是缺乏对数据质量的管控，导致整个行业数据应用仍然处于落后的状态。

2  存在的问题及原因分析

2.1  信息系统问题及原因分析

为了对企业信息系统管理现状有更加深入的了解，我们对企业的信息系统使用情况进行了充分调研，并制定了系统使用情况评分标准（优—5，良—4，中—3，差—2，较差—1），在调研对象的配合下随机抽取了企业常用的30个系统，并对其进行了评分。具体评分结果如表1所示。

表1 系统使用情况评分表

为了使评分结果更加直观，我们用传统饼图对其进行了展示，如图2所示。

图2 系统使用情况评分饼图

通过以上图表可以看出，有15个系统得分达到或超过4分，可以看出企业信息系统使用情况能够达到优良水平的系统仅占所有系统比例的50%，反映出系统使用现状不容乐观，信息系统的使用水平提升空间很大，因此，加强对信息系统的管理也是很有必要的。

随着企业信息化程度的不断提高，相应的信息系统管理理论和管理方法却没有跟上，以至于信息系统出现的问题也较多^[3]。这些问题可以归结为两类，一是系统运行方面的问题；二是系统使用方面的问题。运行方面的问题有系统瘫痪、服务器宕机等灾难事件，系统使用方面的问题有系统使用率低、使用效果差等。

(1)系统运行方面问题的原因分析

有的煤炭企业为了节约成本，多个系统共用一台服务器，服务器压力大，资源不足，单台服务器故障会影响多个系统正常运行；由于历史原因，系统无任何资料，无部署包、源代码、安装手册等，无法重新安装部署；系统无数据备份介质，备份资料无法安全可靠地异地存储；系统无备机，一旦发生重大故障，无法及时恢复系统；服务器配置低，使用时间久，空间小，运行缓慢，影响系统运行速度；多个系统都通过同一个平台单点登录，一旦单点登录出现故障，导致很多系统无法使用；部分系统license需要经常更换；还有一些人为原因，如强行断电、操作失误等。根据前期的调研发现，公司集中运维的66个系统，每个系统平均每月出现低于2小时的故障次数为2-3次。

(2)系统使用方面问题的原因分析

部分系统老旧，没有进行过优化升级，导致用户使用不便，体验差；系统存在BUG，影响用户业务，增大维护工作量；系统不能及时更新，有些功能已无法满足现在的用户需求，导致系统使用率较低，用户体验差；系统对业务水平的提升效果不明显，导致人们对系统的使用积极性不高；系统线上业务不能完全取代线下业务，给业务人员增加了工作量；煤炭企业对信息化带来的便利和应用前景认识不足，缺乏相应的企业文化。

此外信息系统建设不完善、资金投入少、部分企业对信息系统管理的认识不足都是企业信息系统使用出现问题的原因。信息系统使用问题的实质是企业对信息系统的管理问题。

2.2  数据质量问题及原因分析

信息系统是数据的载体，数据是信息系统的灵魂。数据质量的好坏直接影响到数据的应用价值，也间接的体现了信息系统的价值，因此，数据质量管控也应纳入对信息系统使用管理的过程中。数据质量问题主要体现在两方面，即数据真实性、及时性问题。问题具体体现为数据与客观事实不符，数据更新缓慢达不到实际应用需求。

(1)数据真实性问题原因分析

数据真实性问题主要出现在数据采集环节，数据采集的方式主要是传感器采集和人员手工录入。煤矿井下使用的一些传感器精度不够，导致数据失真，比如某设备运行时电流较小只有1A左右，传感器上传后却显示为0；人员手工录入数据时由于操作失误或责任心问题导致数据与实际不符。

(2)数据及时性问题原因分析

数据及时性问题主要体现是数据不能及时录入和更新，人员在手工录入数据时不能严格按照规定时间进行录入导致所需数据不能及时进入系统；上传数据由于某些原因地址发生变更没有专门人员进行及时更新；部分系统需要共享数据，由于系统设计原因数据源的数据不能被实时推送到目标系统。

此外，数据源头不唯一、数据标准缺失、系统数据质量缺乏管控机构等都是数据质量问题的主要原因。

3  解决办法

3.1  信息系统管控办法

要想解决好信息系统管理问题，先要给信息系统提供一个可靠稳定的运行环境，降低使用系统的风险。好的系统是能解决更多的业务痛点，用户会积极主动的去使用。因此，解决信息系统管理问题也应从这些方面入手。

(1)优化服务器资源配置

合理部署系统，保证服务器硬件资源满足系统稳定运行需求。系统运维人员除了要保证系统的稳定运行以外，还要定期对服务器的性能进行优化，让服务器发挥出良好的工作性能是稳定运行的基础^[4]。

(2)全面优化升级系统

过于老旧、使用率极低的系统需要直接停机。按照业务或区域将老旧系统功能整合在新开发的其他系统中，从而提高系统的运行可靠性。

(3)建立重要系统的备机

将公司重要、核心数据进行梳理，建立数据备份机制，采购备份介质，定期进行数据迁移，过期数据要远程离线备份^[5] 。

(4)加强网络及服务器安全管理

生产网与外网要进行物理隔离，按照标准部署网络安全设备，提高硬件的配置，定期更新硬件，安装杀毒软件及防火墙，建立多级密码机制^[6]。建立健全服务器安全管理制度。

(5)建立数据共享平台

根据需求，对各系统数据进行脱敏处理后统一抽取到数据共享平台，并为使用人员定制化开发相应的表单，彻底解决“信息孤岛”问题。

(6)营造良好的信息系统使用氛围

公司上下要树立线上业务必将取代线下业务的信心，加快推进所有业务线上运行的步伐，形成相应的企业文化。

系统安全稳定运行，是系统使用的基础；系统数据共享，给使用人员提供了便利；良好的文化氛围，能够让使用人员更加积极主动的使用系统。全面使用信息系统，提高工作效率的同时为后期进行有关数据的统计、分析提供了便利，这些统计分析结果可以对企业运营决策提供数据支撑。

3.2  数据质量管控办法

(1)实现数据自动采集

为了避免因手工录入带来的数据质量问题，要尽量通过自动化手段、最新通信技术采集数据，同时要使用高性能的传感设备，确保采集数据的准确性，提升数据质量，提高工作效率。

(2)完善系统建设规范和数据标准

逐步建立完善系统的设计、选型、建设、运维规范和数据标准^[7]，通过以上手段，可以在系统建设初期就为数据质量提供有力的管控保障。

(3)建立数据质量管控体系

建立专门的数据质量管控体系，明确数据管控对象、管控职责，对数据进行科学管理，为数据质量提供组织保障^[8]。数据质量管控体系如图3所示。

图3数据质量管控体系

数据质量管控体系分为数据质量管理制度及规范、数据质量管理组织架构、数据质量管理流程。目前煤炭企业要想提高数据质量，必须先成立数据质量管理组织机构，该组织机构由数据治理决策委员会（进行决策）、数据治理办公室（对各环节数据进行监管）、系统责任人（负责系统运维）、数据责任人（负责数据采集、传输、存储）组成，并由该组织机构制定符合企业现状的数据质量管理流程、制度及规范，并根据相关制度、办法对数据质量进行事前规范、事中监控、事后治理，使煤炭企业的数据质量达到更高水平，为后期数据分析应用奠定基础。

4  未来展望

信息系统及其数据质量管理达到一定水平之后，数据分析应用将为企业的优化运营方式、提高管理水平等提供支持，同时煤炭企业将更加重视信息化建设，为信息系统使用提供更好的环境，数据质量将进一步提高，企业的运营决策将更加科学高效^[9]。大数据时代下，新理论与新技术层出不穷，无论是传统行业还是新型行业，所有企业都将成为IT企业^[10]，企业间将应是“抱团取暖”，而不是恶意竞争。对于个人而言，更要找准时代发展的脉络，适应时代的发展，在工作、学习中不断创新、敢为人先，利用新技术、新思想为企业、社会创造更高的价值。

5  结论

信息系统作为现代企业运行管理的工具，同时又是企业数据资产的载体，系统管理的好坏直接影响的企业的运行效率，数据质量的高低也影响到企业运行决策的合理性。因此，煤炭企业信息系统及其数据质量管控方法可以总结为：

（1）从系统的安全、稳定、共享、企业文化等多方面加强信息系统管理。

（2）从数据采集、数据标准、数据管控等方面提高数据质量。

（3）煤炭企业要不断加强创新人才的培养，重视创新能力和创新思维的训练，为企业的长远发展奠定基础。

（4）企业管理人员也要及时掌握行业及外部环境动态，结合高质量的数据分析结果，最终为企业运营决策做出科学判断。

（5）信息系统建设人员，在系统设计初期，要充分调研业务痛点，进行详实的需求分析，设计出高质量的系统模型，严格按照需求进行系统开发，使新系统能够解决日常工作中的业务问题。