全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211148913.9 (22)申请日 2022.09.20 (71)申请人 广东好太太智能家居 有限公司 地址 511434 广东省广州市番禺区化龙镇 石化路21号之一、 之二 (72)发明人 王妙玉 方新华 吴宁泉 李昌  周亮  (74)专利代理 机构 北京市立方律师事务所 11330 专利代理师 崔梓珊 (51)Int.Cl. G06F 16/23(2019.01) G06F 16/27(2019.01) G06F 16/182(2019.01) (54)发明名称 数据处理方法、 装置、 电子设备、 存储介质及 程序产品 (57)摘要 本申请实施例提供了一种数据处理方法、 装 置、 电子设备、 存储介质及程序产品, 涉及数据处 理技术领域; 该数据处理方法包括: 响应于数据 更新指令, 更新数据仓库的外表; 若数据存储节 点的当前状态与预设的数据同步状态匹配, 则基 于外表的更新同步更新数据存储节 点的目标表; 在数据同步过程中配置有用于在数据仓库与数 据存储节 点之间进行数据交互的驱动文件; 外表 与目标表之间具有链接关系, 且包括的字段相 同。 本申请的实施可以在数仓和应用一侧分别建 立相同的表, 通过链路的形式进行关联, 实现数 据同步, 操作简单方便; 后续可 以由数据存储节 点直接向应用客户端提供数据, 解决了频繁查询 数仓表影 响大数据集群性能的问题, 有利于提高 数据查询效率。 权利要求书2页 说明书12页 附图3页 CN 115408412 A 2022.11.29 CN 115408412 A 1.一种数据处 理方法, 其特 征在于, 该 方法包括: 响应于数据更新指令, 更新数据仓库的外表; 若数据存储节点的当前状态与预设的数据同步状态匹配, 则基于所述外表的更新, 同 步更新所述数据存 储节点的目标表; 其中, 在数据同步过程中配置有用于在所述数据仓库与 所述数据存储节点之间进行数 据交互的驱动文件; 所述外表与所述目标表之间具有链接关系, 且 包括的字段相同。 2.根据权利要求1所述的方法, 其特 征在于, 响应的数据更新指令包括以下其中一项: 操作对象触发的数据更新指令; 当前时间达预设更新时间所触发的数据更新指令; 在发生预设事 件时所触发的数据更新指令; 其中, 所述数据 更新指令包括数据写入指令、 数据修改指令、 和数据删除指令 中的至少 一项; 所述预设事 件包括以下至少一项: 在预设时长内接收任一存 储对象相应数据的次数达第一预设阈值; 数据查询出错率达第 二预设阈值; 所述出错率基于客户端反馈的数据查询错误的次数 确定。 3.根据权利要求1所述的方法, 其特征在于, 所述基于所述外表的更新, 同步更新所述 数据存储节点的目标表, 包括: 若所述数据存储节点包括有与所述外表对应的目标表, 则将所述外表当前更新的数据 传输至所述数据存 储节点, 更新所述目标表; 若基于所述外表无法链接至所述数据存储节点中已有的表, 则在所述数据存储节点创 建与所述外表对应的目标表或更新所述目标表的表结构, 并将所述外表当前的数据传输至 所述数据存 储节点, 更新所述目标表。 4.根据权利要求1所述的方法, 其特 征在于, 所述预设的数据同步状态包括 开启; 所述方法还 包括: 响应于针对导数据任务的触发操作, 更改数据存储节点的当前状态为关闭, 并待所述 导数据任务结束, 更改数据存 储节点的当前状态为 开启; 所述若数据存储节点的当前状态与预设的数据同步状态匹配, 则基于所述外表的更 新, 同步更新所述数据存 储节点的目标表, 包括: 将所述数据存 储节点的当前状态与预设的数据同步状态进行匹配; 若匹配, 则基于所述外表的更新, 同步更新所述数据存 储节点的目标表; 否则, 待所述数据存储节点的当前状态更新为预设的数据同步状态时, 基于所述外表 的更新, 同步更新所述数据存 储节点的目标表。 5.根据权利要求1 ‑4中任一项所述的方法, 其特征在于, 所述外表与所述目标表之间链 接关系的设置, 包括设置以下至少一项信息: 所述外表与所述目标表之间的数据同步 通道; 数据存储节点所服 务客户端的地址信息; 数据存储节点所服 务客户端的预设端口; 创建标识, 指示在无法检测到与外表对应的目标表时创建所述目标表或更新所述目标权 利 要 求 书 1/2 页 2 CN 115408412 A 2表的表结构; 刷新标识, 指示非 实时刷新所述目标表; 副本存储标识, 指示针对所述目标表所存 储的副本数量。 6.根据权利要求1 ‑4中任一项所述的方法, 其特征在于, 通过以下其中一项配置用于在 所述数据仓库 与所述数据存 储节点之间进行 数据交互的驱动文件: 在所述数据仓库中创建临时函数并添加驱动文件依赖; 在所述数据仓库中创建永久函数并将驱动文件设置在分布式文件系统的存 储路径下; 在所述数据仓库中基于环境变量的方式引入驱动文件; 在所述数据仓库中通过配置项引入驱动文件; 所述配置项对服 务器有效。 7.一种数据处 理方法, 其特 征在于, 该 方法包括: 响应于数据查询操作, 从权利要求1 ‑6中任一项所述的数据存储节点中获取与数据查 询操作相应的目标 数据; 显示所获取的目标 数据。 8.根据权利要求7 所述的方法, 其特 征在于, 所获取的目标 数据中包括 提示信息; 所述方法还 包括: 若所述提示信 息指示当前数据属于历史数据且该数据将于预设时间节点进行更新, 则 在界面显示所述 提示信息; 响应于针对所述 提示信息触发的数据更新操作, 在所述预设时间节点获取 更新数据。 9.一种数据处 理装置, 其特 征在于, 包括: 更新模块, 用于响应于数据更新指令, 更新数据仓库的外表; 同步模块, 用于若数据存储节点的当前状态与预设的数据同步状态匹配, 则基于所述 外表的更新, 同步更新数据存 储节点的目标表; 其中, 在数据同步过程中配置有用于在所述数据仓库与 所述数据存储节点之间进行数 据交互的驱动文件; 所述外表与所述目标表之间具有链接关系, 且 包括的字段相同; 或, 获取模块, 用于响应于数据查询操作, 从权利要求1 ‑6中任一项所述的数据存储节点中 获取与数据查询操作相应的目标 数据; 显示模块, 用于 显示所获取的目标 数据。 10.一种电子设备, 其特征在于, 包括存储器和处理器, 其中, 所述存储器中存储有计算 机程序, 所述处理器在运行所述计算机程序时用于执行权利要求1至6或7 ‑8中任一项所述 的方法。 11.一种计算机可读存储介质, 其特征在于, 所述存储介质中存储有计算机程序, 所述 计算机程序在处理器中运行时, 所述处理器用于执行权利要求1至6或7 ‑8中任一项所述的 方法。 12.一种计算机程序产品, 其特征在于, 所述计算机产品包括计算机程序, 所述计算机 程序被处 理器执行时实现权利要求1至 6或7‑8中任一项所述的方法。权 利 要 求 书 2/2 页 3 CN 115408412 A 3

PDF文档 专利 数据处理方法、装置、电子设备、存储介质及程序产品

文档预览
中文文档 18 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共18页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 数据处理方法、装置、电子设备、存储介质及程序产品 第 1 页 专利 数据处理方法、装置、电子设备、存储介质及程序产品 第 2 页 专利 数据处理方法、装置、电子设备、存储介质及程序产品 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-07 12:39:55上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。