本文源自:金融界
金融界2024年11月30日消息,国家知识产权局信息显示,北京白龙马云行科技有限公司申请一项名为“一种基于spark的数据指标动态计算和拉宽方法和系统”的专利,公开号CN 119046343 A,申请日期为2024年9月。
专利摘要显示,本发明公开了一种基于spark的数据指标动态计算和拉宽方法和系统;本发明涉及电数据处理技术领域;创建视图配置信息表、原子指标配置信息表和衍生指标配置信息表。初始化配置信息表,包括视图名称、作业编号、计算逻辑、依赖关系等。启动Spark,加载线上三张配置信息表至内存。根据传入的job名称,查询视图配置信息表,获取该job下所有视图的构建逻辑和缓存级别。本发明通过配置化管理,实现了视图、原子指标和衍生指标的灵活构建与计算,减少了重复编码工作,缩短了开发周期。利用Spark等大数据处理框架的并行计算能力,优化了资源使用,提高了数据处理速度。
4000520066 欢迎批评指正
Copyright © 1996-2019 SINA Corporation
All Rights Reserved 新浪公司 版权所有
All Rights Reserved 新浪公司 版权所有