本文源自:金融界
金融界2024年11月11日消息，国家知识产权局信息显示，河钢数字技术股份有限公司申请一项名为“基于hudi的数据采集处理系统、方法、电子设备及介质”的专利，公开号CN 118916432 A，申请日期为2024年7月。
专利摘要显示，本申请适用于大数据采集与处理技术领域，提供了一种基于hudi的数据采集处理系统、方法、电子设备及介质，该系统包括数据采集模块、湖仓一体处理模块和数据应用模块；数据采集模块，用于采集多个业务数据库中的业务数据，并将业务数据增量同步至湖仓一体处理模块中；其中，业务数据包括离线数据和实时数据；湖仓一体处理模块，用于对离线数据和实时数据进行统一存储和处理，得到应用指标数据；数据应用模块，用于根据用户指令对湖仓一体处理模块中的应用指标数据进行关联查询。本申请能够用一套统一的技术架构来覆盖离线和实时的数据集成场景，提高数据处理的时效性，提高资源利用效率；同时还可以消除数据孤岛，提高数据的可访问性和可用性。
