金融界2024年4月3日消息,据国家知识产权局公告,深圳前海微众银行股份有限公司申请一项名为“数据的关联方法及装置“,公开号CN117807091A,申请日期为2024年1月。
专利摘要显示,本申请实施例公开了一种数据的关联方法及装置,应用于分布式计算引擎Spark的服务器,所述方法包括:获取待关联的维度表和事实表,所述维度表和所述事实表中的每个数据都具有标识编号;根据所述维度表的数据量和所述事实表的数据量从多个预设的数据关联策略中选择目标数据关联策略,所述多个预设的数据关联策略包括广播哈希连接策略、排序合并连接策略以及自定义过滤器连接策略;根据所述目标数据关联策略和所述标识编号对所述维度表和所述事实表中的数据进行关联。通过根据维度表和事实表的数据量动态选择合适的数据关联策略,实现数据关联策略与计算任务的适配,提高了数据的关联效率。
来源:金融界