本发明属于数据处理,特别涉及一种能源数据中台与光伏应用元数据同步方法及系统。
背景技术:
1、常规的数据同步方法是业务应用定时查询能源数据中台接口,然后同业务数据库进行比对,进行数据的新增、修改、删除操作,这种设计存在业务方和能源中台耦合性强、中台数据库压力大,且存在数据同步不及时的问题。光伏智慧监控系统对数据实时性性要求比较高,在能源中台数据不能及时同步到业务系统的情况下,客户体验性极差,应用价值降低。
技术实现思路
1、针对上述问题,本发明提供一种能源数据中台与光伏应用元数据同步方法,应用于能源数据中台与光伏应用源数据同步系统,所述方法包括:
2、获取基础数据;
3、对所述基础数据进行数据同步处理;
4、将处理后的所述基础数据发送至光伏应用,实现数据的同步更新。
5、优选地,所述基础数据包括项目、电站、设备和设备属性。
6、优选地,所述获取基础数据,包括:
7、获取存量数据;
8、和/或,获取增量数据。
9、优选地,所述获取存量数据,包括:
10、通过与所述存量数据的数据类型对应的传输接口接收所述存量数据。
11、优选地,所述获取增量数据,包括:
12、捕捉到所述基础数据的数据变化时,将变化后的基础数据或所述基础数据的数据变化内容作为增量数据,并接收所述增量数据。
13、优选地,对所述增量数据进行数据同步处理,包括:
14、对所述增量数据进行数据处理,生成标准数据;
15、将标准数据推送至kafka单元。
16、优选地,对所述增量数据进行处理,包括:对所述增量数据进行数据清洗、数据集成和数据转换。
17、本发明还提出一种能源数据中台与光伏应用元数据同步系统,所述系统包括:
18、能源数据中台,用于存储基础数据;
19、数据同步服务,用于传输所述基础数据并对所述基础数据进行数据同步处理;
20、光伏应用,用于接收数据同步处理后的所述基础数据。
21、本发明具有以下有益效果:
22、本发明将能源中台作为数据中心,光伏智慧监控系统作为中台业务接入方,设计一个可靠的数据同步系统,既能将存量数据同步到业务接入方,又能将增量数据的变化及时、准确的同步到业务接入方,同时,数据同步系统还具备数据清洗、数据监听以及数据转换功能。本发明,主要就是解决能源中台与光伏智慧监控系统耦合度高,数据初始化复杂,以及数据同步不及时、不可靠等问题。
23、本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书以及附图中所指出的结构来实现和获得。
1.一种能源数据中台与光伏应用元数据同步方法,其特征在于,应用于能源数据中台与光伏应用源数据同步系统,所述方法包括:
2.根据权利要求1所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
3.根据权利要求1所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
4.根据权利要求3所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
5.根据权利要求3所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
6.根据权利要求3所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
7.根据权利要求6所述的能源数据中台与光伏应用元数据同步方法,其特征在于,
8.一种能源数据中台与光伏应用元数据同步系统,其特征在于,所述系统包括: