CN110188024A - 大数据环境下实现数据管理能力评估的系统及其方法 - Google Patents

Abstract

本发明涉及一种大数据环境下实现数据管理能力评估的系统，包括目标建立模块；能力评估模块；数据采集模块，用于采集当前的数据管理能力信息；评估分析模块，根据权重对各能力项加权计算得出企业数据管理各能力域的指数；结果发布模块，用于生成当前评估的结果报告及弥合差距的路线图，评估数据管理能力。本发明还涉及一种实现大数据环境下数据管理能力评估处理的方法。采用了本发明的大数据环境下实现数据管理能力评估的系统及其方法，通过该方法及系统能够有效的评估企业数据管理能力，能指导企业进行数据管理过程和方法的建设，规划未来数据管理路线图，提出数据管理能力改进建议和方向，推进企业数据管理能力水平的提升。

Description

大数据环境下实现数据管理能力评估的系统及其方法

技术领域

本发明涉及计算机软件领域，尤其涉及大数据数据管理领域，具体是指一种大数据环境下实现数据管理能力评估的系统及其方法。

背景技术

数据管理能力是数据治理中关键环节。大数据、物联网时代，数据已经成为国家的战略资源，各家单位更多的是借鉴软件能力成熟度模型作为引导，在不同研究领域尝试各种数据管理能力模型，用以研究、指导具体的数据生产过程的数据管理，但是这些理论基本没有考虑企业发展的现状和特性，导致目前很多企业的数据管理方面的意识薄弱、管理方式各异、发展相对落后。由于数据管理能力模型普遍缺少统一的、系统的、适合企业信息环境的、更贴近企业发展的数据管理的标准，同时针对数据管理能力的评价依然没有一个完整的、全面的系统，随着信息化的快速发展，数据管理能力的重要性越来越明显，迫切需要建立一种通用的数据管理能力评估系统，帮助企业、单位更好地进行数据管理能力的评估和规划。

目前大多数企业研究重点在于数据管理能力评估模型所涉及的能力范围、等级的划分和评估的标准，极大的收纳了行业公认的部分。国际上一些组织在借鉴软件能力成熟度模型的基础上提出的数据管理能力模型，以此来规范、指导数据生产过程的数据管理，国也只根据信息化发展情况，增加了“数据标准”“数据安全”和“数据应用”3个能力项。

企业数据管理能力建设是有规律的，如同企业IT建设一样，在不同发展阶段呈现不同的特点，目前大多数企业研究重点在于数据管理能力评估模型所涉及的能力范围、等级的划分和评估的标准，极大的收纳了行业公认的部分，但其并没有很好的跟企业现状相结合，忽略了数据管理能力评估及提升策略的重要性及意义，对数据管理能力提升顺序也仅仅停留在简单描述阶段，对企业数据管理能力提升缺乏针对性的指导。

发明内容

本发明的目的是克服了上述现有技术的缺点，提供了一种满足效率高、操作简便、适用范围较为广的大数据环境下实现数据管理能力评估的系统及其方法。

为了实现上述目的，本发明的大数据环境下实现数据管理能力评估的系统及其方法如下：

该大数据环境下实现数据管理能力评估的系统，其主要特点是，所述的系统包括：

目标建立模块，用于提出数据管理能力目标；

能力评估模块，与所述的目标建立模块相连接，用于将数据管理能力评估方法细化考核指标，并分配权重；

数据采集模块，与所述的能力评估模块相连接，用于采集当前的数据管理能力信息；

评估分析模块，与所述的数据采集模块相连接，用于计算所述的能力评估模块的能力项加权，并根据权重对各能力项加权计算得出企业数据管理各能力域的指数；

结果发布模块，与所述的评估分析模块相连接，用于生成当前评估的结果报告及弥合差距的路线图，评估数据管理能力。

较佳地，所述的能力评估模块包括：

模型修订单元，与所述的目标建立模块相连接，用于为能力级别修订提供参考和依据；

数据管理能力评估模型单元，与所述的模型修订单元相连接，用于将数据管理能力评估标准细化成各项考核指标；

模型版本管理单元，与所述的数据管理能力评估模型单元相连接，用于标准化数据管理能力，支持查找数据管理能力评估模型的各种版本。

较佳地，所述的模型修订单元包括特有目标、特有实践、共有目标、共有实践和数据管理能力级别。

较佳地，所述的数据管理能力评估模型单元的数据管理能力评估模型分为三级，一级为能力域级，二级为能力项级，三级为指标级。

较佳地，所述的评估分析模块中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

该基于上述系统实现大数据环境下数据管理能力评估处理的方法，其主要特点是，所述的方法包括以下步骤：

(1)所述的目标建立模块评估数据管理能力的目标和范围；

(2)所述的能力评估模块确定评估模型及细化评估模型；

(3)所述的数据采集模块对细化后的能力项指标进行评分；

(4)所述的评估分析模块对评估结果进行分析；

(5)所述的结果发布模块发布评估结果。

较佳地，所述的步骤(2)具体包括以下步骤：

(2.1)根据所述的模型修订单元判断是否符合能力级别修订标准，如果是，则继续步骤(2.3)；否则，继续步骤(2.2)；

(2.2)所述的能力评估模块将数据管理能力评估标准细化成各项考核指标；

(2.3)生成数据管理能力评估模型。

较佳地，所述的步骤(1)中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

采用了本发明的大数据环境下实现数据管理能力评估的系统及其方法，提供了一种数据管理能力评估方法及系统，通过该方法及系统能够有效的评估企业数据管理能力，并客观的反应数据管理能力的现状、识别数据管理能力不足，发现亟需改进的问题。另外还能指导企业进行数据管理过程和方法的建设，规划未来数据管理路线图，提出数据管理能力改进建议和方向，推进企业数据管理能力水平的提升。

附图说明

图1为本发明的大数据环境下实现数据管理能力评估的系统的结构示意图。

图2为本发明的大数据环境下实现数据管理能力评估的系统的能力评估模块的结构示意图。

图3为本发明的实现大数据环境下数据管理能力评估处理的方法的完成数据管理能力评估模型的步骤示意图。

图4为本发明的大数据环境下实现数据管理能力评估的系统的模型修订单元的结构示意图。

具体实施方式

为了能够更清楚地描述本发明的技术内容，下面结合具体实施例来进行进一步的描述。

本发明的该大数据环境下实现数据管理能力评估的系统，其中包括：

目标建立模块，用于提出数据管理能力目标；

能力评估模块，与所述的目标建立模块相连接，用于将数据管理能力评估方法细化考核指标，并分配权重；

数据采集模块，与所述的能力评估模块相连接，用于采集当前的数据管理能力信息；

评估分析模块，与所述的数据采集模块相连接，用于计算所述的能力评估模块的能力项加权，并根据权重对各能力项加权计算得出企业数据管理各能力域的指数；

结果发布模块，与所述的评估分析模块相连接，用于生成当前评估的结果报告及弥合差距的路线图，评估数据管理能力。

作为本发明的优选实施方式，所述的能力评估模块包括：

模型修订单元，与所述的目标建立模块相连接，用于为能力级别修订提供参考和依据；

数据管理能力评估模型单元，与所述的模型修订单元相连接，用于将数据管理能力评估标准细化成各项考核指标；

模型版本管理单元，与所述的数据管理能力评估模型单元相连接，用于标准化数据管理能力，支持查找数据管理能力评估模型的各种版本。

作为本发明的优选实施方式，所述的模型修订单元包括特有目标、特有实践、共有目标、共有实践和数据管理能力级别。

作为本发明的优选实施方式，所述的数据管理能力评估模型单元的数据管理能力评估模型分为三级，一级为能力域级，二级为能力项级，三级为指标级。

作为本发明的优选实施方式，所述的评估分析模块中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

本发明的该基于上述系统实现大数据环境下数据管理能力评估处理的方法，其中包括以下步骤：

(1)所述的目标建立模块评估数据管理能力的目标和范围；

(2)所述的能力评估模块确定评估模型及细化评估模型；

(2.1)根据所述的模型修订单元判断是否符合能力级别修订标准，如果是，则继续步骤(2.3)；否则，继续步骤(2.2)；

(2.2)所述的能力评估模块将数据管理能力评估标准细化成各项考核指标；

(2.3)生成数据管理能力评估模型；

(3)所述的数据采集模块对细化后的能力项指标进行评分；

(4)所述的评估分析模块对评估结果进行分析；

(5)所述的结果发布模块发布评估结果。

作为本发明的优选实施方式，所述的步骤(1)中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

本发明的具体实施方式中，大数据环境下数据管理能力评估的方法及系统，包括(详见附图：图1)，目标建立模块、数据管理能力评估模型、数据采集模块、评估分析引擎、结果发布模块。

本发明中的目标建立模块是用于业务专家(业务代表)提出数据管理能力目标；数据管理能力评估模型模块成为企业衡量数据管理能力的基准，实现数据管理能力评估方法的技术落地，通过技术手段，将数据管理能力评估方法细化成各项考核指标，并根据实际情况，合理分配权重有利于帮助企业研究、指导具体的数据全生命周期的数据管理；数据采集模块是根据数据管理能力评估模型的能力项，由数据管理部门进行当前的数据管理能力信息采集；评估分析引擎根据数据管理能力目标和当前的数据管理能力这两个级别之间的差异进行评估和分析；最终由结果发布模块生成当前评估的结果报告及弥合差距的路线图，完成数据管理能力的评估。通过以上系统能够有效的对数据管理的能力进行评估，并客观的反应数据管理能力的现状、发现亟需改进的问题，以便构建数据管理发展路径及持续改进对策、调整和优化数据管理行动计划，推进数据管理能力水平的提升。

本发明涉及计算机软件领域，特别涉及大数据领域、数据管理领域，具体是指大数据环境下实现数据管理能力自我评估的方法及系统。

数据来源于业务并服务于业务，该发明大数据环境下数据管理能力评估系统从企业现状与未来业务部门对数据管理能力的实际需求出发，首先由业务部门提出数据管理能力目标，再结合企业现状和借鉴的国内外数据管理能力评估模型进行分析，建立操作性较强的适合本企业的数据管理能力评估模型。采用科学有效的数据管理能力定性与定量相结合的评估方法，量化企业数据管理能力因子，结合数据管理能力信息的采集，对业务专家提出的数据管理能力目标及当前实际数据管理能力情况的差异进行评估，最终结果用于指导具体的数据管理能力提升过程和制定弥合差异的路线图，可为企业量身定制合理的提升策略及建议。

本发明的目的是提供一种大数据环境下数据管理能力评估方法及系统，通过该方法及系统能够有效的评估企业数据管理能力，并客观的反应数据管理能力的现状、识别数据管理能力不足，发现亟需改进的问题。构建数据管理发展路径及持续改进对策、调整和优化数据管理行动计划，规划未来数据管理路线图，提出数据管理能力改进建议和方向，推进数据管理能力水平的提升。

为了实现上述的目的，本发明的大数据环境下数据管理能力评估方法及系统如下：大数据环境下数据管理能力评估方法，其主要特点是，所述的数据管理能力评估方法包括：

目标建立模块，用于业务专家(业务代表)提出数据管理能力目标；数据管理能力评估模型模块，与所述的目标建立模块相连，包含数据管理能力评估模型、模型修订、模型版本管理模块，用于让企业的数据管理过程走向标准化，让数据管理能力模型成为企业衡量数据管理能力的基准；数据采集模块，与所述的数据管理能力评估模型相连，根据数据管理能力评估模型的能力项分解指标由数据管理部门进行信息采集；评估分析引擎，与所述的数据采集模块相连，用于数据管理能力目标和当前数据管理能力之间的差异进行评估和分析；结果发布模块，于所述的评估分析引擎相连，用于生成当前评估的结果报告及弥合差距的路线图，完成数据管理能力的评估。

数据管理能力评估模型模块

下面详细描述数据管理能力评估模型模块中的数据管理能力评估模型、模型修订、模型版本管理模块的构成和原理。

一、数据管理能力评估模型

所述的数据管理能力评估模型主要是实现数据管理能力评估方法的技术落地，将数据管理能力评估方法细化成各项考核指标，并根据实际情况，合理分配权重的过程，数据管理能力评估模型支持动态更新，数据管理能力评估模型分为三级，一级为能力域级、二级为能力项级、三级为指标级，从而实现数据管理能力评估模型的建立。

二、数据管理能力评估模型版本管理模块

所述的数据管理能力评估模型模块，包含数据管理能力评估模型版本管理模块。数据管理能力评估模型版本是某一评估阶段模型的表示，在某一评估阶段具有唯一性，能够避免发生版本丢失或混淆等现象，其按照一定规则保存模型的所有版本，方便快速准确的查找到评估模型任何阶段的任何版本，能避免出现因版本不一致而造成的评估问题。版本管理实际上是一个标准化的过程，也是推进企业数据管理能力标准化的流程，还可作为不同时期的数据管理能力比较，有利于企业寻找各阶段之间的差距，激励企业更好的开展数据管理工作。

三、模型修订模块

所述的模型修订模块，包含特有目标、特有实践，共有目标、共有实践和数据管理能力级别，其中企业现状分析模块为特有目标、特有实践提供参考信息和依据，模型输入模块为共有目标、实践提供参考信息和依据。能力级别形成了一个逐步升级的平台，其中每个数据管理能力等级的能力将作为达更高等级能力的基础，数据管理能力提升的过程其实也是管理能力逐步积累的过程。模型输入模块为能力级别修订也参考信息和依据(如下图所示)。

评估分析引擎

所述的评估分析引擎，采用综合评分分析法进行评估，对数据管理能力评估模型中各能力域中的能力项加权计算得分，根据权重对各能力项分项指标赋分加权合成，形成能力项指标分值，根据权重对各能力项加权合成，形成企业数据管理各能力域的指数。计算公式：

其中I代表企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m表示构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

结果发布模块

结果发布模块在接收到评估分析引擎计算的结果后，通过丰富的图表对企业的数据管理能力进行展现，通过分析当前的和业务专家提出的数据管理能力目标状态之间的差距，客观分析目前企业所处于的阶段，以及希望在未来到达什么位置，需要哪些能力提升来完善当前和业务专家提出的目标差距，生成包含但不限于雷达图及能力提升演进路线图等展现图形。

下面以一个例子说明本发明在大数据环境下数据管理能力评估方法的应用。结合附图对本发明的技术方案进行清楚的描述，所描述的具体体现是本发明一部分的实施例，而不是全部的实施例。基于本发明描述的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，均属于本发明保护的范围。

整个实施过程分为五个步骤：第一步：明确评估的数据管理能力的目标和范围，评估的范围直接影响评估模型的选取；第二步：数据管理专家和业务专家(业务代表)不断的沟通、商讨，最终确定评估模型及细化评估模型；第三步：数据采集模块将细化了的能力项指标进行评分；第四步：对评估结果进行分析；第五步：将评估结果进行发布。

一、目标建立模块

目标建立模块，用于业务专家(业务代表)提出数据管理能力目标。首先由业务专家(业务代表)和数据管理专家成立联合规划小组，对数据管理能力需求的每一个能力项进行详细的分析，并最终建立数据管理能力目标，而这些目标如何实现则是由企业通过提升数据管理能力体现出来。

二、数据管理能力评估模型模块

数据管理能力评估模型由能力域、能力项、指标、权重构成。具体实施方式为结合企业IT发展的规划和现状，根据业务专家(业务代表)提出数据管理能力目标，再借鉴国内外数据管理能力评估模型，建立操作性较强的适合企业发展的数据管理能力评估模型。具体例子模型如下：

三、数据采集模块

数据采集模块与所数据管理能力评估模型模块相连，根据数据管理能力评估模型的能力项进行量化，形成指标项，再由数据管理专家进行当前的数据管理能力指标信息数据采集，数据采集模块可以灵活自定义采集方式，所有数据信息都可以通过用户线上、线下的方式将其采集到模型中。该数据采集模块能够以庞大的数据体系为基础实现对脏、假、伪、废数据的清洗，并可打通线下线上，实现用户数据的结构化、非结构化采集，同时还具备将采集好的信息发布到其他的系统中的能力。

四、评估分析引擎

综合评分分析法进行评估，对数据管理能力模型中各能力域中的能力项加权计算得分，根据权重对各能力项分项指标赋分加权合成，形成能力项级指标分值，根据权重对各能力项加权合成，形成企业数据管理各能力域的指数。计算公式：

其中I代表企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m表示构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

序号	能力域(I)	实际能力指数(I实际)	期望能力指数(I期望)
				1	元数据管理	0.2	3.06
2	数据标准	0.59	3.02
				3	数据质量	0.35	3.27
4	数据安全	0.46	2.9
				5	数据模型管理与组织文化	0.45	3.26
6	数据服务	0.4	3.03
				7	数据生命周期	0.55	2.88

五、结果发布模块

结果发布模块在接收到评估分析引擎计算的结果后，通过数据可视化进行展现，包含但不限于雷达图、能力提升演进路线图对数据管理能力进行展现，通过分析当前和业务目标之间的数据管理能力差距，客观分析目前所处于的阶段，以及希望在未来到达什么位置，需要哪些能力的提升来填补当前和业务目标的差距。

采用了本发明的大数据环境下实现数据管理能力评估的系统及其方法，提供了一种数据管理能力评估方法及系统，通过该方法及系统能够有效的评估企业数据管理能力，并客观的反应数据管理能力的现状、识别数据管理能力不足，发现亟需改进的问题。另外还能指导企业进行数据管理过程和方法的建设，规划未来数据管理路线图，提出数据管理能力改进建议和方向，推进企业数据管理能力水平的提升。

在此说明书中，本发明已参照其特定的实施例作了描述。但是，很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此，说明书和附图应被认为是说明性的而非限制性的。

Claims (8)

1.一种大数据环境下实现数据管理能力评估的系统，其特征在于，所述的系统包括：

目标建立模块，用于提出数据管理能力目标；

能力评估模块，与所述的目标建立模块相连接，用于将数据管理能力评估方法细化考核指标，并分配权重；

数据采集模块，与所述的能力评估模块相连接，用于采集当前的数据管理能力信息；

评估分析模块，与所述的数据采集模块相连接，用于计算所述的能力评估模块的能力项加权，并根据权重对各能力项加权计算得出企业数据管理各能力域的指数；

结果发布模块，与所述的评估分析模块相连接，用于生成当前评估的结果报告及弥合差距的路线图，评估数据管理能力。

2.根据权利要求1所述的大数据环境下实现数据管理能力评估的系统，其特征在于，所述的能力评估模块包括：

模型修订单元，与所述的目标建立模块相连接，用于为能力级别修订提供参考和依据；

数据管理能力评估模型单元，与所述的模型修订单元相连接，用于将数据管理能力评估标准细化成各项考核指标；

模型版本管理单元，与所述的数据管理能力评估模型单元相连接，用于标准化数据管理能力，支持查找数据管理能力评估模型的各种版本。

3.根据权利要求2所述的大数据环境下实现数据管理能力评估的系统，其特征在于，所述的模型修订单元包括特有目标、特有实践、共有目标、共有实践和数据管理能力级别。

4.根据权利要求2所述的大数据环境下实现数据管理能力评估的系统，其特征在于，所述的数据管理能力评估模型单元的数据管理能力评估模型分为三级，一级为能力域级，二级为能力项级，三级为指标级。

5.根据权利要求1所述的大数据环境下实现数据管理能力评估的系统，其特征在于，所述的评估分析模块中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。

6.一种基于权利要求1所述的系统实现大数据环境下数据管理能力评估处理的方法，其特征在于，所述的方法包括以下步骤：

(1)所述的目标建立模块评估数据管理能力的目标和范围；

(2)所述的能力评估模块确定评估模型及细化评估模型；

(3)所述的数据采集模块对细化后的能力项指标进行评分；

(4)所述的评估分析模块对评估结果进行分析；

(5)所述的结果发布模块发布评估结果。

7.根据权利要求6所述的实现大数据环境下数据管理能力评估处理的方法，其特征在于，所述的步骤(2)具体包括以下步骤：

(2.1)根据所述的模型修订单元判断是否符合能力级别修订标准，如果是，则继续步骤(2.3)；否则，继续步骤(2.2)；

(2.2)所述的能力评估模块将数据管理能力评估标准细化成各项考核指标；

(2.3)生成数据管理能力评估模型。

8.根据权利要求1所述的大数据环境下实现数据管理能力评估的系统，其特征在于，所述的步骤(1)中计算企业数据管理能力域的指数，具体为：

根据以下公式计算计算企业数据管理能力域的指数：

其中，I为企业数据管理能力模型中能力域的能力指数，n为该能力域中能力项的个数，m为构成该能力项的指标个数，P_ij为第i个能力项的第j项指标标准化的值，N_ij为第i个能力项的第j个指标在其中的权重，W_i为第i个能力项的权重。