做电网大数据分析的话咋获得数据集呢国内或国外( 三 )
(1)概念发现:通过给定词,来发现与其相近的新概念,这里表达出的是与其有关系,但是未对具体的关系做深入判断,所以成为概念发现。
图13:关键词概念
(2)概念关系推理:在发现概念之后,为了进一步推定其关系,这里采用了迭代的方法,在不断迭代发现与其相关概念的概念时,建立起了词与词的关系网,如图是经历了两次计算后的效果图,是词关系网建立的中间过程。
图14:概念关联推理
(3)关联关系计算:通过不断的迭代学习,最终形成的关系网络如图所示,在不管学习的过程中,相关概念不断的聚集,从而建立起了比较密切的关系,而这种关系通常是同位关系,也就是代项或参项等。
图15:关键词关联关系计算
(4)本体关系计算:同步上述三个步骤的处理,从而能够帮助本体库的完善,在少量专家的参与下,不断扩充本体库。如图是通过电力本体库计算得出的本体的关系图。
图16:搜索关键词本体关系
五、语义本体功能
语义精准搜索引擎通过实体抽取功能,在数据库中搜索挖掘出其中实体,规定各实体之间的关系类别,通过交叉信息熵计算每个实体的关联关系,从而建立整理的实体关系展示图谱。如下图,搜索引擎抽取出电力行业的实体概念,通过规定核心概念、用项、代项、分项、属项、族项、参项这六项关系,采用一定算法建立实体之间的关系,从而建立整个实体的关系关联展示图。
图17:语义本体功能图
以上案例就是进行就精准数据集分类,并通过不同的表现形式而完成的数据分析的,希望可以对您有所帮助。以上案例大数据分析是使用了北京理工大学大数据搜索与挖掘实验室张华平主任研发的NLPIR大数据语义智能分析技术平台实现的,如果感兴趣可以了解一下!
■网友
XY你的问题最好能具体一点。电网业务比较复杂,从并网到输变电,从生产调度到配电,从计量到销售,涵盖了输变配电、工程施工、设计造价、设备资产、电表计量、市场销售、新能源等很多业务。这些业务的特征及关联依赖是不一样的,信息化建设程度各地也不同,应用的技术和架构也不一样,如果要做大数据分析,首先要有一个方向,是针对哪一块做,要达到什么效果等,不然怎么能知道需要哪些数据呢?建议题主把背景和问题讲得更完整一些,光这一句话是完全没有讨论基础的。谢谢。
■网友
可以从现有业务系统中获取业务数据,另外可以在政务公开网获取公开数据。
■网友
有价值的数据,基本不太可能对外公开。即使拿到,也是有些过时的。但是完成一个课题绰绰有余。
首先明确,大数据分析的目的,即相关业务。
其次,根据业务,寻找掌握数据的部门,包括:发策、调度、运检、营销。主要就这几个。
然后根据业务,申报相应的项目,然后从他们的数据库里导出某一时段的数据。
推荐阅读
- 写下我关于做数据分析专员的困惑和各位的建议是
- 自己做电商平台好还是入驻商家好
- 数据挖掘、数据分析方向国内有哪些大学比较强
- 有没有可能利用大数据分析出今年世界杯冠军
- 为啥PHP社区鲜有异步队列,分布式计算,数据分析的项目和讨论
- 毕业生工作两个月就被劝退,现在比较迷茫档案处置和以后是做运营、用户研究还是走数据分析方向哪一个好
- 在中国做电子工程师待遇怎样
- 请问一个大学生怎样有计划的成为一名数据分析师
- 新加坡国立大学的本科的计量金融(QF),商业数据分析(BA),计算机科学(CS)咋选择
- |“数字化抗疫”成为世界互联网大会热词 “江苏创造”,闪耀未来网络
