航天信息申请数据抓取专利，实现数据自动化采集提高抓取效率lg...

摘要：金融界2024年1月10日消息，据国家知识产权局公告，航天信息股份有限公司申请一项名为“一种数据抓取方法、装置及相关设备“，公开号CN117370464A，申请日期为2023年10月。专利摘要显示，本申请提供一种数据抓取方法、装置及相关设备，通过构建离线数据同步平台，基于该平台的插件开发规范，分别创建电子表格数据读取插件、接口数据读取插件和数据写入插件；将创建的插件在离线数据同步平台中配置发布；基于电子表格数据读取插件和接口数据读取插件，通过离线数据同步平台的离线数据同步引擎对本地数据源的表格数据和Restful API数据源中的数据进行采集；利用数据写入插件将采集电子表格数据中的数据或Restful API数据源中的数据进行转换存储，同步更新到离线数据同步平台对应关联的目标数据库或数据池中。以使数据离线平台能够对用户上传的电子报个文件和Restful API接口数据实现数据自动化采集，大大提高了数据的抓取效率。