一种对大规模可再生能源数据进行快速概率建模方法

专利类型：发明专利

语言：中文

申请号：CN201710856461.2

申请日：20170920

发明人：宋杰周健鲍伟杨燕余娟冯斐张晓颖熊祥鸿张奕项旭杨顾薇薇沈冰潘爱强周德生周卓懿曾平徐洁邹晓峰杜炤鑫朱奕帆

申请人：国网上海市电力公司华东电力试验研究院有限公司重庆大学

申请人地址：200126 上海市浦东新区源深路1122号

公开日：20180119

公开号：CN107609141A

代理人：朱成之;周乃鑫

代理机构：上海信好专利代理事务所(普通合伙) 31249

摘　　要：本发明公开了一种对大规模可再生能源数据进行快速概率建模方法，包含以下过程：基于Spark和HDFS为新能源快速建模搭建分布式并行框架，使该框架与可再生能源现有的存储系统兼容；利用RDD容错和基于内存计算的特点，构建求解Wakeby分布的血缘图，从而实现基于RDD的新型Wakeby分布快速估计算法；推导了该并行估计算法的计算时间与样本数据量以及Spark两个重要的可调参数的函数关系。发明推导的算法的时间消耗与样本大小、并行度、分区数的函数关系有助于在给定的样本数据量下帮助程序员在Spark平台上程序调优、在给定配置下的时间消耗预测以及在期望时间下的硬件配置。

主权项：一种对大规模可再生能源数据进行快速概率建模方法，其特征在于，包含以下过程：基于Spark平台和HDFS为可再生能源数据建模搭建分布式并行框架，使所述分布式并行框架与所述可再生能源数据的存储系统兼容；利用RDD容错和基于内存计算的特点，构建求解Wakeby概率分布模型，实现基于RDD的Wakeby分布快速估计算法。

关键词：消耗;程序员;配置;新能源;可再生能源数据;概率建模方法;图;样本数据量;Wakeby分布;估计算法;函数关系;预测;公开;内存;血缘;给定;Spark;有助于;RDD;HDFS;

法律状态：

IPC专利分类号：G06F17/30(2006.01)I,G06F17/50(2006.01)I,G06N7/00(2006.01)I,G06Q50/06(2012.01)I