一种基于数据标准建设装置和方法与流程

1.本技术涉及数据标准技术领域，特别是涉及一种基于数据标准建设装置和方法。


背景技术：

2.目前大多数企业亟需通过制定一套由管理制度、管控流程、技术工具共同组成的体系，来对数据定义、分类、格式、编码等标准化管理。通俗地讲，对企业来说，数据标准就是对数据类型、长度、归属部门等定义一套统一的规范，以保障不同业务系统之间可以做到对同样的数据理解统一和使用统一。
3.但长期以来,大部分企业的系统建设都是依据业务需求来的，没有一个整体的规划，没有考虑是否与其它系统的功能或数据存在重复的问题，而且各个系统由不同的厂商和产品搭建，所以不同系统之间数据的不一致性难以避免，也造成多种数据问题：
4.1、数据共享难以实现。数据存储结构不一致，调用多系统的数据时，由于某些数据在不同系统中数据存储结构不同，导致数据无法直接关联，影响不同系统之间的数据共享。
5.2、数据同名不同义导致错误。数据定义不一致，不同系统对数据的命名、业务含义、取值范围等定义不同，比如同名不同义、同义不同名等。
6.3、沟通成本增加。数据理解不一致，不同人员对数据的理解不一致，导致在数据使用时浪费很多时间来进行沟通。
7.4、数据来源不明。数据来源不一致，数据存在多个来源，在使用数据时，不清楚应该取哪个系统的数据。
8.简单来说，企业下分支各自都有自己的信息管理系统，分别管理自己的业务形态，当总公司要进行数据整合的时候，几个系统的信息都会进行存在一张信息表中，这就是在建立数据标准。


技术实现要素：

9.基于此，有必要针对上述技术问题，提供一种能够在业务系统之间做到对同样的数据理解统一和使用统一的基于数据标准建设装置和方法。
10.一方面，提供一种基于数据标准建设装置，包括：
11.数据标准分类单元，用于根据数据结构、数据内容、技术业务，确定数据标准分类；
12.数据标准规划单元，用于根据业务的优先顺序和实施难易程度，确定数据标准框架体系；
13.数据标准设计单元，用于根据数据标准分类，对数据规划数据标准设计；
14.数据标准实施映射单元，用于根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；
15.数据标准执行单元，用于根据业务需求和实施难易程度，确定数据标准执行原则。
16.另一方面，提供一种基于数据标准建设方法，包括：
17.数据标准分类单元根据数据结构、数据内容、技术业务，确定数据标准分类；
18.数据标准规划单元根据业务的优先顺序和实施难易程度，确定数据标准框架体系；
19.数据标准设计单元根据数据标准分类，对数据规划数据标准设计；
20.数据标准实施映射单元根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；
21.数据标准执行单元根据业务需求和实施难易程度，确定数据标准执行原则。
22.本发明实施提供的一种基于数据标准建设装置和方法，针对数据标准的统一制定与管理，提供了一种有效的数据标准建设装置，通过发明实施提供的装置，明确了数据标准目前状况、数据标准设计、数据标准实施映射、数据标准执行开展、数据标准维护完善的过程，提升了业务规范性，保障人员对数据业务含义理解一致，支撑业务数据分析、挖掘及信息共享，同时提升了系统实施工作效率，保障系统建设符合规范，同时降低出错率，提升数据质量，也提供了更加完整、准确的数据，更好的支撑经营决策、精细化管理。
附图说明
23.图1为一个实施例中基于数据标准建设装置的数据标准框架图；
24.图2为一个实施例中基于数据标准建设装置的数据标准示意图；
25.图3为一个实施例中基于数据标准建设装置的数据标准分类图；
26.图4为一个实施例中基于数据标准建设装置数据标准实施流程图；
27.图5为一个实施例中基于数据标准建设装置的数据标准现状调研流程；
28.图6为一个实施例中基于数据标准建设装置的数据标准设计流程图；
29.图7为一个实施例中基于数据标准建设装置的数据标准分类图；
30.图8为一个实施例中基于数据标准建设装置的数据标准实施映射流程图；
31.图9为一个实施例中基于数据标准建设装置的数据标准执行流程图；
32.图10为一个实施例中基于数据标准建设装置的结构示意图。
具体实施方式
33.为了使本技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本技术进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本技术，并不用于限定本技术。
34.本发明实施例中，数据标准化的过程其实就是在数据管理平台实现数据标准，并将各个系统产生的数据通过清洗、转换加载到整合平台的数据模型中，实现数据标准化的过程。数据治理的第一步就是要梳理清楚企业拥有哪些数据，并整合数据。因此，在数据标准中，首先可以根据不同的数据域，对数据标准进行分类。
35.数据标准可以分为基础类、分析类和专有类三类，其中：基础类数据标准是企业日常业务开展过程中所产生的具有共同业务特征的基础性数据，如客户、供应商、产品、型号、部门、人员、财务等。分析类数据标准是为满足公司内管理需要及外部监管要求，在基础性数据基础上按一定统计、分析规则加工后的数据。专有类数据标准是公司架构下子公司在业务经营及管理分析中所涉及的特有数据。针对基础类数据标准，可以参考金融行业经常用的数据标准十大主题模型包括：主题组织数据，包括客户、资产、机构、产品等主题，如图1
所示。针对某个数据主题，数据标准包含定义与分类、信息项、标准代码，如图2所示。一般数据标准会包括：主题定义、信息项、标准代码三个文档，其中：标准主题定义文档：主要是记录数据标准的定义、分类，用于规范和识别数据的主题归属。标准信息项文档用于记录数据主题的信息项业务属性，包括：分类、业务含义、业务逻辑和技术属性，包括：类型、长度、默认规则。标准代码文档用于记录信息项固定码值的编码、分类、使用规则等。信息项文档是数据标准的核心。内容包括分类、业务描述和技术描述，一般由信息大类、信息小类、信息项、信息项描述、信息类别、长度共6项组成。这些内容可以调整，例如信息大类、小类，可以合并，或者拆除更多层级。信息大、小类是对信息项的常规分类，例如：例如客户信息大类包括基本信息、联系信息、关联信息、财务信息、风险信息、评价信息、往来信息七大类；信息小类，包括：客户编号、名称、证件、地址、评级信息、模型评分、等级、开办业务等。信息项是用来描述一个事物的最基本元素。表示一个事物的识别、限制、数量、分类、状态，或者事物间的关系，例如客户信息的名称、年龄、性别等。信息项描述是描写或者规范信息项的具体业务描述及界定。信息类别是根据业务需求，定义相应的信息项在数据库中所需要的技术格式。例如：编号、标志、代码、金额、日期、数值、文本等。长度是信息项的数据长度，供各系统建设参考使用。
36.除了从数据域角度对数据标准进行分类，还可以从三个维度去对数据标准进行分类，即数据结构、数据内容来源、技术业务，如图3所示。从数据结构角度进行的数据标准分类，结构化数据标准是针对结构化数据制定的标准，通常包括：信息项分类、类型、长度、定义、值域等。非结构化数据标准是针对非结构化数据制定的标准，通常包括：文件名称、格式、分辨率等。从数据内容来源进行的数据标准分类，基础类数据标准是指业务系统直接产生的明细数据和相关代码数据，保障业务活动相关数据的一致性和准确性。派生类数据标准是指基础类数据根据管理运营的需求加工计算而派生出来的数据，例如：统计指标、实体标签等。从技术业务角度进行的数据标准分类，业务数据标准是指为实现业务沟通而制定的标准，通常包括：业务定义和管理部门，业务主题等。技术数据标准是指从信息技术的角度对数据标准的统一规范和定义，通常包括：数据类型、字段长度、精度、数据格式等。
37.在对数据标准分类完成后，可以进行数据标准实施。数据标准实施过程包括数据标准规划、数据标准现状调研、标准设计、标准的实施映射、标准执行以及在使用过程中维护增强等过程，如图4所示。主要内容包括：数据标准的范围有哪些，数据标准目前状况是怎样的，数据标准如何进行设计，数据标准实施映射应该如何去做，数据标准执行应该如何开展，如何对数据标准进行维护并完善等。具体地，数据标准规划，如图5所示，需要考虑业务计划、应用范围、数据中体、服务对象、优先策略等。在开展数据标准规划时可以采用引进业界实施经验，根据业务的优先顺序和实施难易程度，规划标准的框架体系以及实施路径的方式开展实施工作。数据标准现状，如图6所示，调研需要考虑现有定义、使用习惯、问题梳理、现状分析、参考文档等。可以通过调查问卷、安排现场访谈、收集文档资料等手段，针对不同的业务系统选用合适的调研方式，对现有定义、使用习惯、数据分布、数据流向、业务规则、服务部门等开展相关调研工作。数据标准设计，如图7所示，是对数据标准的主题、信息大类、信息小类、信息项、数据类型、数据长度、数据定义、数据规则等进行规划设计。在方法论指导下，完成数据标准设计和定义工作，包括数据业务描述定义即业务属性、类型长度定义即技术属性、其他标准信息定义。数据标准实施映射，如图8所示，要明确需要映射内容的
系统范围、应用领域、数据库表、数据字典、数据字段等。将已定义的数据标准与业务系统、业务应用进行映射，表明标准和现状的关系以及可能影响到的应用。数据标准执行，如图9所示，要充分考虑业务需求和实施难易程度上确定执行原则，最大程度上结合目标和现状，针对不同类型系统制定相应策略，并设定合理阶段性目标。执行建议可从业务流程、业务系统、管理应用及数据平台等各方面提出数据标准执行的建议。数据标准维护增强是需要进行标准发布、管理机制、工作流程、配置工具等方面。结合数据管理需求和机制，组建组织机构，培训、培养管理员，负责相应工作，建立配套规章制度，利用管理工具维护更新标准并监控其执行情况。
38.基于上述描述，本发明是实施例提供一种基于数据标准建设装置，如图10所示，包括：
39.数据标准分类单元，用于根据数据结构、数据内容、技术业务，确定数据标准分类；
40.数据标准规划单元，用于根据业务的优先顺序和实施难易程度，确定数据标准框架体系；
41.数据标准设计单元，用于根据数据标准分类，对数据规划数据标准设计；
42.数据标准实施映射单元，用于根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；
43.数据标准执行单元，用于根据业务需求和实施难易程度，确定数据标准执行原则。
44.具体实施时，数据标准分类单元，具体用于：根据数据结构，确定结构化数据标准包括：信息项分类、类型、长度、定义、值域，非结构化数据标准包括：文件名称、格式、分辨率；根据数据内容，确定业务系统直接产生的明细数据和相关代码数据为基础类数据标准，确定需求加工计算而派生出来的数据为派生类数据标准；根据技术业务，确定业务数据标准包括：业务定义和管理部门，业务主题，技术数据标准包括：数据类型、字段长度、精度、数据格式。
45.具体实施时，数据标准规划单元，具体用于：根据业务的优先顺序和实施难易程度，确定定数据标准框架体系包括：一期基础数据标准框架、二期数据标准完善标准、三期数据管控实现构架；所述一期基础数据标准框架包括：整体规划、制度管理、客户标准、产品标准；所述二期数据标准完善标准包括：机构标准、渠道标准、应用指标标准、客户执行建议、管理工具建议；所述三期数据管控实现构架包括：机构执行建议、产品执行建议、渠道执行建议、指标执行建议。
46.具体实施时，数据标准设计单元，具体用于：根据数据标准分类，确定数据标准的主题、信息大类、信息小类、信息项、数据类型、数据长度、数据定义、数据规则。
47.具体实施时，数据标准实施映射单元，具体用于：根据系统范围、应用领域、数据库表、数据字典、数据字段，将规划设计后的数据标准与业务系统和业务应用进行映射。
48.综上，通过数据标准的建设，可以有效消除数据跨系统的非一致性，从根源上解决数据定义和使用的不一致问题，为企业数据建设带来诸多好处：数据标准的统一制定与管理，可保证数据定义和使用的一致性，促进企业级单一数据视图的形成，促进信息资源共享，因此在调研前期需详细调研数据标准的范围有哪些，数据标准目前状况是怎样的，数据标准如何进行设计，数据标准实施映射应该如何去做，数据标准执行应该如何开展，如何对数据标准进行维护并完善等，这对后续标准的建设至关重要。通过评估已有系统标准建设
情况，可及时发现现有系统标准问题，支撑系统改造，减少数据转换，促进系统集成，提高数据质量。数据标准可作为新建系统参考依据，为企业系统建设整体规划打好基础，减少系统建设工作量，保障新建系统完全符合标准。
49.基于相同的技术构思，本发明实施例提供一种基于数据标准建设方法，包括：
50.s21、数据标准分类单元根据数据结构、数据内容、技术业务，确定数据标准分类。
51.具体实施时，数据标准分类单元根据数据结构，确定结构化数据标准包括：信息项分类、类型、长度、定义、值域，非结构化数据标准包括：文件名称、格式、分辨率；根据数据内容，确定业务系统直接产生的明细数据和相关代码数据为基础类数据标准，确定需求加工计算而派生出来的数据为派生类数据标准；根据技术业务，确定业务数据标准包括：业务定义和管理部门，业务主题，技术数据标准包括：数据类型、字段长度、精度、数据格式。
52.s22、数据标准规划单元根据业务的优先顺序和实施难易程度，确定数据标准框架体系。
53.具体实施时，数据标准规划单元根据业务的优先顺序和实施难易程度，确定定数据标准框架体系包括：一期基础数据标准框架、二期数据标准完善标准、三期数据管控实现构架；所述一期基础数据标准框架包括：整体规划、制度管理、客户标准、产品标准；所述二期数据标准完善标准包括：机构标准、渠道标准、应用指标标准、客户执行建议、管理工具建议；所述三期数据管控实现构架包括：机构执行建议、产品执行建议、渠道执行建议、指标执行建议。
54.s23、数据标准设计单元根据数据标准分类，对数据规划数据标准设计。
55.具体实施时，数据标准设计单元根据数据标准分类，确定数据标准的主题、信息大类、信息小类、信息项、数据类型、数据长度、数据定义、数据规则。
56.s24、数据标准实施映射单元根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用。
57.具体实施时，数据标准实施映射单元根根据系统范围、应用领域、数据库表、数据字典、数据字段，将规划设计后的数据标准与业务系统和业务应用进行映射。
58.s25、数据标准执行单元根据业务需求和实施难易程度，确定数据标准执行原则。
59.具体实施时，数据标准执行单元需要进行标准发布、管理机制、工作流程、配置工具等方面。结合数据管理需求和机制，组建组织机构，培训、培养管理员，负责相应工作，建立配套规章制度，利用管理工具维护更新标准并监控其执行情况。
60.以上所述实施例仅表达了本技术的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本技术构思的前提下，还可以做出若干变形和改进，这些都属于本技术的保护范围。因此，本技术专利的保护范围应以所附权利要求为准。

技术特征：
1.一种基于数据标准建设装置，其特征在于，包括：数据标准分类单元，用于根据数据结构、数据内容、技术业务，确定数据标准分类；数据标准规划单元，用于根据业务的优先顺序和实施难易程度，确定数据标准框架体系；数据标准设计单元，用于根据数据标准分类，对数据规划数据标准设计；数据标准实施映射单元，用于根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；数据标准执行单元，用于根据业务需求和实施难易程度，确定数据标准执行原则。2.根据权利要求1所述的装置，其特征在于，所述数据标准分类单元，具体用于：根据数据结构，确定结构化数据标准包括：信息项分类、类型、长度、定义、值域，非结构化数据标准包括：文件名称、格式、分辨率；根据数据内容，确定业务系统直接产生的明细数据和相关代码数据为基础类数据标准，确定需求加工计算而派生出来的数据为派生类数据标准；根据技术业务，确定业务数据标准包括：业务定义和管理部门，业务主题，技术数据标准包括：数据类型、字段长度、精度、数据格式。3.根据权利要求2所述的装置，其特征在于，所述数据标准规划单元，具体用于：根据业务的优先顺序和实施难易程度，确定定数据标准框架体系包括：一期基础数据标准框架、二期数据标准完善标准、三期数据管控实现构架；所述一期基础数据标准框架包括：整体规划、制度管理、客户标准、产品标准；所述二期数据标准完善标准包括：机构标准、渠道标准、应用指标标准、客户执行建议、管理工具建议；所述三期数据管控实现构架包括：机构执行建议、产品执行建议、渠道执行建议、指标执行建议。4.根据权利要求1所述的装置，其特征在于，所述数据标准设计单元，具体用于：根据数据标准分类，确定数据标准的主题、信息大类、信息小类、信息项、数据类型、数据长度、数据定义、数据规则。5.根据权利要求1至4任意一项所述的装置，其特征在于，所述数据标准实施映射单元，具体用于：根据系统范围、应用领域、数据库表、数据字典、数据字段，将规划设计后的数据标准与业务系统和业务应用进行映射。6.一种基于数据标准建设方法，其特征在于，包括：数据标准分类单元根据数据结构、数据内容、技术业务，确定数据标准分类；数据标准规划单元根据业务的优先顺序和实施难易程度，确定数据标准框架体系；数据标准设计单元根据数据标准分类，对数据规划数据标准设计；数据标准实施映射单元根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；数据标准执行单元根据业务需求和实施难易程度，确定数据标准执行原则。7.根据权利要求6所述的方法，其特征在于，所述数据标准分类单元根据数据结构、数据内容、技术业务，确定数据标准分类，具体包括：
数据标准分类单元根据数据结构，确定结构化数据标准包括：信息项分类、类型、长度、定义、值域，非结构化数据标准包括：文件名称、格式、分辨率；根据数据内容，确定业务系统直接产生的明细数据和相关代码数据为基础类数据标准，确定需求加工计算而派生出来的数据为派生类数据标准；根据技术业务，确定业务数据标准包括：业务定义和管理部门，业务主题，技术数据标准包括：数据类型、字段长度、精度、数据格式。8.根据权利要求7所述的方法，其特征在于，所述数据标准规划单元根据业务的优先顺序和实施难易程度，确定数据标准框架体系，具体包括：数据标准规划单元根据业务的优先顺序和实施难易程度，确定定数据标准框架体系包括：一期基础数据标准框架、二期数据标准完善标准、三期数据管控实现构架；所述一期基础数据标准框架包括：整体规划、制度管理、客户标准、产品标准；所述二期数据标准完善标准包括：机构标准、渠道标准、应用指标标准、客户执行建议、管理工具建议；所述三期数据管控实现构架包括：机构执行建议、产品执行建议、渠道执行建议、指标执行建议。9.根据权利要求8所述的方法，其特征在于，所述数据标准设计单元根据数据标准分类，对数据规划数据标准设计，具体包括：数据标准设计单元根据数据标准分类，确定数据标准的主题、信息大类、信息小类、信息项、数据类型、数据长度、数据定义、数据规则。10.根据权利要求6至9任意一项所述的方法，其特征在于，所述数据标准实施映射单元根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用，具体包括：数据标准实施映射单元根根据系统范围、应用领域、数据库表、数据字典、数据字段，将规划设计后的数据标准与业务系统和业务应用进行映射。

技术总结
本申请涉及一种基于数据标准建设装置和方法。所述装置包括：数据标准分类单元，用于根据数据结构、数据内容、技术业务，确定数据标准分类；数据标准规划单元，用于根据业务的优先顺序和实施难易程度，确定数据标准框架体系；数据标准设计单元，用于根据数据标准分类，对数据规划数据标准设计；数据标准实施映射单元，用于根据规划设计后的数据标准，确定所述数据标准对应的业务系统和业务应用；数据标准执行单元，用于根据业务需求和实施难易程度，确定数据标准执行原则。所述方法能够在业务系统之间做到对同样的数据理解统一和使用统一。统之间做到对同样的数据理解统一和使用统一。统之间做到对同样的数据理解统一和使用统一。


技术研发人员：丁乐 钟松延 周凯 王宁 林云峰 熊金国 张传开 刘晓亚
受保护的技术使用者：航天科工网络信息发展有限公司
技术研发日：2022.12.28
技术公布日：2023/9/23