简介:摘要:随着电网终端采集装置的大范围安装与现场应用,越来越多的电网业务应用具备了数据实时采集的能力。为了充分发挥实时采集的电网数据价值,要求技术发展能够适应大规模电网数据流实时处理的新要求。然而,当前电力大数据的处理方式仍以传统的数据批处理为主,而大规模电网数据流在实时性、无序性、无限性、易失性、突发性等方面均呈现出了诸多新特征,使得基于“先存储后处理”设计理念的数据批量处理在可伸缩性、系统容错、状态一致性、负载均衡、数据吞吐量等方面面临着前所未有的新的挑战。类似于MapReduce的离线处理并不能很好地解决问题,而流计算可以很好地对大规模流动数据在不断变化的运动过程中实时地进行分析,捕捉到可能有用的信息。
简介:摘要:数据自动处理技术是基于大数据技术而出现的全新技术,是通过大数据技术的分析,实现有效的处理和归类,提升数据的使用效率。在目前来看,数据自动收资处理技术主要是应用在配电网上。是因为在配电网的使用中,会出现大量的电力数据,这些数据本身的处理如果不到位,直接的后果就是数据本身反应的一些具有危险性的信息无法发现,可能导致配电网问题无法在第一时间解决,需要通过结合大数据技术,来实现配电网的数据自动收资处理技术的建设。则本文将从配电网规划融入大数据后的优势入手,全面展开基于大数据的配电网规划数据自动收资处理技术研究。