一种电网配用电大数据的数据挖掘方法与流程
未命名
09-03
阅读:101
评论:0

1.本发明涉及能源数据分析技术领域,尤其涉及一种电网配用电大数据的数据挖掘方法。
背景技术:
2.大数据挖掘已经提出了许多基础的、通用的分析方法,包括分类、聚类、孤立点、预测、演变、关联、回归、决策树、神经网络、支持向量机、主成分分析、假设检验等。但是,对于配用电大数据态势感知和知识发现而言,现有的基础、通用的大数据挖掘分析方法并不完全适用。
3.随着电网规模扩大、量测手段和信息通信技术的不断完善,电网的基础运行数据逐渐呈现出数据量大、处理逻辑复杂、存储周期长等大数据特征,因此在配用电大数据的数据挖掘中,由于数据的类型以及体量较大,导致数据挖掘速率以及性能较低,同时单个处理器的数据处理负载较大,在数据挖掘搜索的过程中易产生大量的结构连接数目,这也为数据挖掘的可靠性带来严峻挑战。
技术实现要素:
4.针对现有技术的不足,本发明提供了一种电网配用电大数据的数据挖掘方法,解决了针对配用电大数据进行数据挖掘过程中,所存在数据挖掘速率以及性能较低,同时易产生大量的结构连接数目的技术问题。
5.为解决上述技术问题,本发明提供了如下技术方案:一种电网配用电大数据的数据挖掘方法,该方法包括以下步骤:s1、基于电网大数据获取当地电网的配用电数据;s2、对配用电数据进行筛选并剔除其中与决策属性关联性小的数据集合得到决策数据集;s3、确定与决策数据集相关联的数据挖掘规则,并根据数据挖掘规则生成矩阵挖掘规则;s4、将决策数据集进行路径分解生成若干个查询路径;s5、计算若干个查询路径中的任意多个数据片段的威望度;s6、根据威望度判断查询路径是否为最优的查询路径;若是,则进入步骤s7;若否,则返回步骤s4;s7、采用最优的查询路径根据矩阵挖掘规则在决策数据集中进行数据挖掘。
6.进一步地,在步骤s2中,具体过程包括以下步骤:s21、将配用电数据随机划分为若干个数据集合,,其中p为配用电数据,为随机划分的第i个数据集合;s22、设任意数据集合中所对应的事件a、事件b为配用电数据p上的两个等价关
系族,事件d为决策属性,并根据等价关系族确定事件a和事件b在配用电数据p上的概率分布;s23、根据概率分布计算事件a的信息熵h(a);s24、根据信息熵h(a)计算相对于事件b的条件熵h(a|b);s25、判断决策属性事件d与事件a的关联性大小;若事件d与事件a的关联性大,则保留事件d所对应的数据集合;若事件d与事件a的关联性小,则剔除事件d所对应的数据集合;s26、将剔除的数据集合合并构成决策数据集r。
7.进一步地,在步骤s23中,信息熵h(a)的计算公式为:
8.上式中,n、m均表示事件的数量,为事件a在配用电数据上的概率分布。
9.进一步地,在步骤s24中,条件熵h(a|b)的计算公式为:
10.上式中,n、m均表示事件的数量,为事件a在配用电数据p上的概率分布,为事件b在配用电数据p上的概率分布。
11.进一步地,在步骤s25中,通过计算决策属性事件d与事件a的关联度作为关联性大小的判断依据,具体过程包括以下步骤:s251、计算决策属性事件d的信息熵h(d);s252、根据信息熵h(d)计算决策属性事件d相对事件a的条件熵h(d|a);s253、根据信息熵h(d)和条件熵h(d|a)计算决策属性事件d与事件a之间的关联度。
12.进一步地,在步骤s3中,具体过程包括以下步骤:s31、定义与配用电数据相对应的项集为,事件矩阵为,其中,
13.上标t表示转置矩阵的符号;s32、根据步骤s31计算与数据集合相对应项集的支持度;s33、设处理器的数量为i个,将决策数据集r以数据长度l分割为i-1个数据块,且处理器根据数据块产生局部事件矩阵;s34、处理器计算与局部事件矩阵对应的支持度;s35、处理器删除支持度小于1的所对应的数据块,则完成矩阵挖掘规则的生成。
14.进一步地,在步骤s32中,支持度的计算公式为:
15.上式中通过统计求和计算得出与数据集合相对应项集的支持度。
16.进一步地,在步骤s4中,具体过程包括以下步骤:s41、采用树的查找算法在决策数据集中给定一颗查询树,并从查询树r中的路径集合中筛选出简单路径,n为查询树r中路径的数量;s42、判断路径集合中的路径是否为简单路径;若,路径是路径的父亲节点,且路径集合中相邻两个节点之间的边不表示祖先-后代关系,且存在路径是查询树r中的分支节点或谓词节点,则路径为简单路径;s43、根据简单路径在决策数据集进行路径分解生成若干个查询路径;若路径集合中的路径为简单路径,且查询树r中的每一个节点至少包含在一条路径中,则路径为决策数据集中的一个路径分解,即为一个查询路径。
17.进一步地,在步骤s5中,数据片段的威望度的计算公式为:
18.上式中,表示片段数据i的入度,入度指在查询路径中所有经过片段数据i的边的和,i表示片段数据的总数量。
19.进一步地,在步骤s6中,具体为:对查询路径中若干数据片段所对应的威望度求和并求解均值,若均值威望度大于等于阈值1,则该查询路径为最优的查询路径,若小于阈值1,则返回步骤s4。
20.借由上述技术方案,本发明提供了一种电网配用电大数据的数据挖掘方法,至少具备以下有益效果:1、本发明解决数据挖掘在决策数据集r中数据量较大情况下的挖掘速率以及性能下降的问题,并快速生成相对应的挖掘目标,从而不仅减少了单个处理器需要处理的数据量,而且多个处理器同时运算,大大缩短了数据挖掘的耗时。
21.2、本发明解决了数据挖掘在决策数据集r中数据量较大情况下的挖掘速率以及性能下降的问题,利用矩阵挖掘规则快速生成相对应的挖掘目标,以矩阵挖掘规则的并行方式,不仅减少了单个处理器需要处理的数据量,而且多个处理器同时运算,大大缩短了数据挖掘的耗时。
22.3、本发明将决策数据集进行路径分解生成若干个查询路径,通过筛选出若干路径中的简单路径,并以简单路径为基础要求实现路径分解,即得到若干个查询路径,能够以目标节点为导向的路径查询处理框架,该方法充分利用基本操作的支持,增大了基本查询片段的粒度,从而减少了结构连接的数目,并且能够缩短在数据挖掘过程中的查询路径,提高了数据挖掘效率。
附图说明
23.此处所说明的附图用来提供对本技术的进一步理解,构成本技术的一部分,本申
请的示意性实施例及其说明用于解释本技术,并不构成对本技术的不当限定。在附图中:图1为本发明能源数据挖掘方法的流程图。
具体实施方式
24.为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。借此对本技术如何应用技术手段来解决技术问题并达成技术功效的实现过程能充分理解并据以实施。
25.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,因此,本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
26.传统电力系统分析是基于模型的分析方法,其结果依赖于网络拓扑和模型参数的准确性。现行的无功电压运行准则和规定提出的电压和功率因数评估指标,难以分析无功补偿设备的配置是否合理,也难以帮助用户准确掌握电网的长期运行状态。随着电网规模扩大、量测手段和信息通信技术的不断完善,电网的基础运行数据逐渐呈现出数据量大、处理逻辑复杂、存储周期长等大数据特征。因此,有必要建立一些精细化的评价指标,从大量数据中挖掘电网实际运行过程中薄弱环节,并对新能源汇集站和新能源场站的无功配置提出合理建议,以提高电网运行的安全性和稳定性,降低网损,提高运行经济性。
27.基于上述数据挖掘在电网运行中的实际应用,本实施例提出了一种具体实施方式,以最优的查询路径和矩阵挖掘规则相结合,最优的查询路径能够给定一个查询路径最短的搜索路径,同时以目标节点为导向的路径查询处理框架,并减少结构连接的数目,而矩阵挖掘规则能够将关联算法和矩阵结合在一起,并提高矩阵运用到关联规则的可行性,解决数据挖掘在决策数据集r中数据量较大情况下的挖掘速率以及性能下降的问题。
28.请参照图1,本实施例提出了一种电网配用电大数据的数据挖掘方法,该方法包括以下步骤:s1、基于电网大数据获取当地电网的配用电数据,配用电数据指当地电网在任意一个周期内的配电数据以及用户端的用电数据等,这些数据均能够直接从电力中心的电网大数据中获取,并以配用电数据为数据基础从中进行数据挖掘。
29.s2、对配用电数据进行筛选并剔除其中与决策属性关联性小的数据集合得到决策数据集;在本实施例中,为了对步骤s2的实现方式进行说明,具体过程是通过以下步骤实现的,详细的实施方法如下:s21、将配用电数据随机划分为若干个数据集合,,其中p为配用电数据,为随机划分的第i个数据集合;s22、设任意数据集合中所对应的事件a、事件b为配用电数据p上的两个等价关系族,事件d为决策属性,并根据等价关系族确定事件a和事件b在配用电数据p上的概率分布,等价关系族即为数据挖掘的事件,也是通过数据挖掘所得到的最终结果,描述为某个事件;两个等价关系族的表达式为:
[0030][0031]
则,事件a和事件b在配用电数据p上的概率分布为:
[0032][0033]
其中,表示数据集合中的第n个事件的等价关系,表示数据集合中的第m个事件的等价关系,则概率分布为:
[0034][0035]
上式中,为数据集合的基数。
[0036]
s23、根据概率分布计算事件a的信息熵h(a);具体的,信息熵h(a)的计算公式为:
[0037]
上式中,n、m均表示事件的数量,为事件a在配用电数据上的概率分布。
[0038]
s24、根据信息熵h(a)计算相对于事件b的条件熵h(a|b);具体的,条件熵h(a|b)的计算公式为:
[0039]
上式中,n、m均表示事件的数量,为事件a在配用电数据p上的概率分布,为事件b在配用电数据p上的概率分布。
[0040]
通过上述内容可知,信息熵h(a)度量了事件a发生的不确定性,而条件熵h(a|b)则描述了在事件a发生的情况下,事件b发生的不确定性。
[0041]
s25、判断决策属性事件d与事件a的关联性大小,具体为通过计算决策属性事件d与事件a的关联度作为关联性大小的判断依据;若事件d与事件a的关联性大,则保留事件d所对应的数据集合;若事件d与事件a的关联性小,则剔除事件d所对应的数据集合;s26、将剔除的数据集合合并构成决策数据集r。
[0042]
在本实施例中,为了对步骤s25的实现方式进行说明,具体过程是通过以下步骤实现的,详细的实施方法如下:s251、计算决策属性事件d的信息熵h(d);在该步骤中,对于事件d的信息熵h(d)的计算可参照信息熵h(a)的计算过程,两者采用同一个公式,因此,根据等价关系族的表达式为:
[0043]
则,事件d在配电数据p上的概率分布为:
[0044]
其中,表示与事件d相对应的数据集合中的第k个事件的等价关系,则概率分布为:
[0045]
则,信息熵h(d)的计算公式为:
[0046]
s252、根据信息熵h(d)计算决策属性事件d相对事件a的条件熵h(d|a);同样的,与事件d相对应事件a的条件熵h(d|a)与步骤s24的计算原理相同,为:
[0047]
上式中,t、n均表示事件的数量,为事件d在配用电数据p上的概率分布,表示与事件d相对应的数据集合中的第k个事件的等价关系,与事件a相对应的数据集合中的第i个事件的等价关系。
[0048]
s253、根据信息熵h(d)和条件熵h(d|a)计算决策属性事件d与事件a之间的关联度。
[0049]
具体的,关联度的计算公式为:
[0050]
具体的,关联度的值越大,则表明事件d与事件a的关联性大,在本实施例中以数值0.6为界限,大于0.6则认为两个事件的关联性大,反之则关联性小。
[0051]
在本实施例中,通过关联度作为判断各个事件之间的关联性大小的依据,以三个事件a、b、d来对应不同的数据集合,以事件a的信息熵h(a)和相对于事件b的条件熵h(a|b),能够得出事件a和事件b发生的确定性,同时以事件d作为决策属性来判断与事件a或b之间的关联性大小,并根据关联性的大小来决定事件d的保留或剔除,以此达到对配用电数据p中与数据挖掘不相关的事件进行筛选,由此缩小数据量,提高找到具有关联性大的事件的速率以及相关度。
[0052]
对于关联度来说,记录每个数据集合中的每个事件对决策属性的关联度,将若干事件按照对决策属性的关联性大小进行排序,每次保留关联性排前60%的事件,这种事件筛选方法缩小了随机搜索范围,可以加快数据挖掘的收敛速度。
[0053]
s3、确定与决策数据集相关联的数据挖掘规则,并根据数据挖掘规则生成矩阵挖掘规则;在本实施例中,为了对步骤s3的实现方式进行说明,具体过程是通过以下步骤实现的,详细的实施方法如下:s31、定义与配用电数据相对应的项集为,事件矩阵为,其中,
[0054]
上标t表示转置矩阵的符号,在配用电数据中,每一个数据集合可对等的定义为一个项集,在数据挖掘中,项集指由一个或多个项组成的集合,比如说在数据集合中,项指的是配用电数据的类型名称,如工业配用电、居民配用电、公共设施配用电等,项集就是形成这些配用电类型的集合。
[0055]
而事件矩阵则是根据传统的pm算法在数据挖掘中的应用所定义的,因此对于支持度的计算仅仅是针对与数据集合相对应项集,具体的,与事件矩阵相对应的则是数据块,数据块为将决策数据集r以数据长度l分割为i-1个数据块,分割得到的数据块的数据行数相同,每一行数据代表一个项集,因此,将与数据块相对应的事件矩阵与其自身的转置矩阵相乘产生局部事件矩阵。
[0056]
s32、根据步骤s31计算与数据集合相对应项集的支持度;具体的,支持度的计算公式为:
[0057]
上式中通过统计求和计算得出与数据集合相对应项集的支持度。
[0058]
s33、设处理器的数量为i个,将决策数据集r以数据长度l分割为i-1个数据块,且处理器根据数据块产生局部事件矩阵,具体的,分割得到的数据块的数据行数相同,每一行数据代表一个项集,因此,将与数据块相对应的事件矩阵与其自身的转置矩阵相乘产生局部事件矩阵;事件矩阵中的每个元素,即事件,只有0和1两种值,代表某一事件是否存在有项集i中的某一项,因此将事件矩阵与其自身的转置矩阵相乘即得到局部事件矩阵。
[0059]
s34、处理器计算与局部事件矩阵对应的支持度;具体的,支持度的计算过程参见步骤s32即可,在此处不再详细赘述。
[0060]
s35、处理器删除支持度小于1的所对应的数据块,则完成矩阵挖掘规则的生成。
[0061]
由于传统pm数据挖掘算法在进行关联规则挖掘时,事件所对应的数据库的增长将导致事件矩阵列数的增长,因此将事件矩阵分割成多个宽度相等的矩阵,即分割得到的n-1个数据块,每个分割矩阵宽度的目标是以保证矩阵的每个向量能够方便地放入计算节点的内存。
[0062]
每个处理器将本地的局部事件矩阵转换为局部事件矩阵,然后通过计算每个数据块的支持度作为删除依据,将支持度小于1的数据块进行删除形成矩阵挖掘规则。
[0063]
在本实施例中,通过确定与决策数据集相关联的数据挖掘规则并生成矩阵挖掘规则,能够将关联算法和矩阵结合在一起,并提高矩阵运用到关联规则的可行性,通过将决策
数据集r进行分割,每个处理器仅处理一部分的数据块,解决了数据挖掘在决策数据集r中数据量较大情况下的挖掘速率以及性能下降的问题,利用矩阵挖掘规则快速生成相对应的挖掘目标,以矩阵挖掘规则的并行方式,不仅减少了单个处理器需要处理的数据量,而且多个处理器同时运算,大大缩短了数据挖掘的耗时。
[0064]
并且,利用矩阵计算直接生成局部事件矩阵,并通过以支持度为删除依据的矩阵挖掘规则,在很大程度上优化了整体的数据挖掘性能,能够直接定位局部事件矩阵中要搜索的列所对应的时间,从而减少了搜索过程中所耗费的时长,提高了数据挖掘的效率。
[0065]
s4、将决策数据集进行路径分解生成若干个查询路径;在本实施例中,为了对步骤s4的实现方式进行说明,具体过程是通过以下步骤实现的,详细的实施方法如下:s41、采用树的查找算法在决策数据集中给定一颗查询树,并从查询树r中的路径集合中筛选出简单路径,n为查询树r中路径的数量;s42、判断路径集合中的路径是否为简单路径;若,路径是路径的父亲节点,且路径集合中相邻两个节点之间的边不表示祖先-后代关系,且存在路径是查询树r中的分支节点或谓词节点,则路径为简单路径;本实施例通过在路径集合中筛选出简单路径,同时筛选条件定义为:查询树r中的简单路径不包括祖先-后代结构关系,分支节点和值谓词节点只能出现在路径末端的路径,因此它的计算可以直接通过路径索引的查询来完成,如此缩短了查询路径,提高了查询速率。
[0066]
s43、根据简单路径在决策数据集进行路径分解生成若干个查询路径;若路径集合中的路径为简单路径,且查询树r中的每一个节点至少包含在一条路径中,则路径为决策数据集中的一个路径分解,即为一个查询路径。
[0067]
现有技术中,对于数据挖掘过程中的匹配路径查询的基本方式是对数据进行导航式的遍历,导航式的遍历简单、直接,但执行效率不能得到保证,尤其是在大数据量的情况下,导航式遍历方法的低效性促使了类似于关系数据库中“一次一集合”的路径查询计算策略的出现,目前被广泛接受的分解连接查询执行策略的基本思路是,首先定位路径查询树中每个节点的候选元素节点集合,然后通过结构连接操作组合这些中间结果来生成最后的结果,然而采用这种策略会产生大量的结构连接操作,目前,这方面的工作主要集中在高效的结构连接算法上,因此只针对没有分支的路径查询,而且大量的结构连接操作是该方法不可避免的。
[0068]
基于上述所存在的问题,针对产生大量的结构连接操作这一现象,本实施例提出了一种方法,将决策数据集进行路径分解生成若干个查询路径,通过筛选出若干路径中的简单路径,并以简单路径为基础要求实现路径分解,即得到若干个查询路径,能够以目标节点为导向的路径查询处理框架,该方法充分利用基本操作的支持,增大了基本查询片段的粒度,从而减少了结构连接的数目,并且能够缩短在数据挖掘过程中的查询路径,提高了数据挖掘效率。
[0069]
s5、计算若干个查询路径中的任意多个数据片段的威望度;在该步骤中,一个查询路径中对应若干个数据片段,也为查询片段,因此在数据片
段中,一个数据片段的威望度是指这个数据片段入度与所有数据片段的入度和的比值,因此数据片段的威望度的计算公式为:
[0070]
上式中,表示片段数据i的入度,入度指在查询路径中所有经过片段数据i的边的和,i表示片段数据的总数量。
[0071]
因此,一个片段数据的威望度越高,则该片段数据代表的数据与数据挖掘中的关联次数就越多,而该片段数据与数据挖掘目标之间的关联度就越高。
[0072]
s6、根据威望度判断查询路径是否为最优的查询路径;若是,则进入步骤s7;若否,则返回步骤s4。
[0073]
在步骤s6中,对查询路径中若干数据片段所对应的威望度求和并求解均值,若均值威望度大于等于阈值1,则该查询路径为最优的查询路径,若小于阈值1,则返回步骤s4。
[0074]
s7、采用最优的查询路径根据矩阵挖掘规则在决策数据集中进行数据挖掘;在该步骤中,以最优的查询路径和矩阵挖掘规则相结合,最优的查询路径能够给定一个查询路径最短的搜索路径,同时以目标节点为导向的路径查询处理框架,并减少结构连接的数目,而矩阵挖掘规则能够将关联算法和矩阵结合在一起,并提高矩阵运用到关联规则的可行性,解决数据挖掘在决策数据集r中数据量较大情况下的挖掘速率以及性能下降的问题,并快速生成相对应的挖掘目标,从而不仅减少了单个处理器需要处理的数据量,而且多个处理器同时运算,大大缩短了数据挖掘的耗时。
[0075]
以上实施方式对本发明进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
技术特征:
1.一种电网配用电大数据的数据挖掘方法,其特征在于,该方法包括以下步骤:s1、基于电网大数据获取当地电网的配用电数据;s2、对配用电数据进行筛选并剔除其中与决策属性关联性小的数据集合得到决策数据集;s3、确定与决策数据集相关联的数据挖掘规则,并根据数据挖掘规则生成矩阵挖掘规则;s4、将决策数据集进行路径分解生成若干个查询路径;s5、计算若干个查询路径中的任意多个数据片段的威望度;s6、根据威望度判断查询路径是否为最优的查询路径;若是,则进入步骤s7;若否,则返回步骤s4;s7、采用最优的查询路径根据矩阵挖掘规则在决策数据集中进行数据挖掘。2.根据权利要求1所述的数据挖掘方法,其特征在于,在步骤s2中,具体过程包括以下步骤:s21、将配用电数据随机划分为若干个数据集合,,其中p为配用电数据,为随机划分的第i个数据集合;s22、设任意数据集合中所对应的事件a、事件b为配用电数据p上的两个等价关系族,事件d为决策属性,并根据等价关系族确定事件a和事件b在配用电数据p上的概率分布;s23、根据概率分布计算事件a的信息熵h(a);s24、根据信息熵h(a)计算相对于事件b的条件熵h(a|b);s25、判断决策属性事件d与事件a的关联性大小;若事件d与事件a的关联性大,则保留事件d所对应的数据集合;若事件d与事件a的关联性小,则剔除事件d所对应的数据集合;s26、将剔除的数据集合合并构成决策数据集r。3.根据权利要求2所述的数据挖掘方法,其特征在于,在步骤s23中,信息熵h(a)的计算公式为:上式中,n、m均表示事件的数量,为事件a在配用电数据上的概率分布。4.根据权利要求2所述的数据挖掘方法,其特征在于,在步骤s24中,条件熵h(a|b)的计算公式为:上式中,n、m均表示事件的数量,为事件a在配用电数据p上的概率分布,为事件b在配用电数据p上的概率分布。5.根据权利要求2所述的数据挖掘方法,其特征在于,在步骤s25中,通过计算决策属性事件d与事件a的关联度作为关联性大小的判断依据,具体过程包括以下步骤:s251、计算决策属性事件d的信息熵h(d);s252、根据信息熵h(d)计算决策属性事件d相对事件a的条件熵h(d|a);s253、根据信息熵h(d)和条件熵h(d|a)计算决策属性事件d与事件a之间的关联度
。6.根据权利要求1所述的数据挖掘方法,其特征在于,在步骤s3中,具体过程包括以下步骤:s31、定义与配用电数据相对应的项集为,事件矩阵为,其中,上标t表示转置矩阵的符号;s32、根据步骤s31计算与数据集合相对应项集的支持度;s33、设处理器的数量为i个,将决策数据集r以数据长度l分割为i-1个数据块,且处理器根据数据块产生局部事件矩阵;s34、处理器计算与局部事件矩阵对应的支持度;s35、处理器删除支持度小于1的所对应的数据块,则完成矩阵挖掘规则的生成。7.根据权利要求6所述的数据挖掘方法,其特征在于,在步骤s32中,支持度的计算公式为:上式中通过统计求和计算得出与数据集合相对应项集的支持度。8.根据权利要求1所述的数据挖掘方法,其特征在于,在步骤s4中,具体过程包括以下步骤:s41、采用树的查找算法在决策数据集中给定一颗查询树,并从查询树r中的路径集合中筛选出简单路径,n为查询树r中路径的数量;s42、判断路径集合中的路径是否为简单路径;若,路径是路径的父亲节点,且路径集合中相邻两个节点之间的边不表示祖先-后代关系,且存在路径是查询树r中的分支节点或谓词节点,则路径为简单路径;s43、根据简单路径在决策数据集进行路径分解生成若干个查询路径;若路径集合中的路径为简单路径,且查询树r中的每一个节点至少包含在一条路径中,则路径为决策数据集中的一个路径分解,即为一个查询路径。9.根据权利要求1所述的数据挖掘方法,其特征在于,在步骤s5中,数据片段的威望度的计算公式为:上式中,表示片段数据i的入度,入度指在查询路径中所有经过片段数据i的边的和,i表示片段数据的总数量。10.根据权利要求1所述的数据挖掘方法,其特征在于,在步骤s6中,具体为:对查询路径中若干数据片段所对应的威望度求和并求解均值,若均值威望度大于等于阈值1,则该查询路径为最优的查询路径,若小于阈值1,则返回步骤s4。
技术总结
本发明涉及能源数据分析技术领域,解决了针对配用电大数据进行数据挖掘过程中,所存在数据挖掘速率以及性能较低,同时易产生大量的结构连接数目的技术问题,尤其涉及一种电网配用电大数据的数据挖掘方法,该方法包括以下步骤:S1、基于电网大数据获取当地电网的配用电数据;S2、对配用电数据进行筛选并剔除其中与决策属性关联性小的数据集合得到决策数据集。本发明解决数据挖掘在决策数据集R中数据量较大情况下的挖掘速率以及性能下降的问题,并快速生成相对应的挖掘目标,从而不仅减少了单个处理器需要处理的数据量,而且多个处理器同时运算,大大缩短了数据挖掘的耗时。大大缩短了数据挖掘的耗时。大大缩短了数据挖掘的耗时。
技术研发人员:吴全才 王天安 黄炜 张玎一
受保护的技术使用者:云南电网能源投资有限责任公司
技术研发日:2023.07.24
技术公布日:2023/8/31
版权声明
本文仅代表作者观点,不代表航家之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)
航空之家 https://www.aerohome.com.cn/
飞机超市 https://mall.aerohome.com.cn/
航空资讯 https://news.aerohome.com.cn/