国家标准网
(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202111345913.3 (22)申请日 2021.11.15 (65)同一申请的已公布的文献号 申请公布号 CN 114070787 A (43)申请公布日 2022.02.18 (73)专利权人 南京航空航天大 学 地址 210016 江苏省南京市秦淮区御道街 29号 (72)发明人 王铁鑫 江宏 苏圣阳 吴昊  严欣华  (74)专利代理 机构 南京经纬专利商标代理有限 公司 32200 专利代理师 陆烨 (51)Int.Cl. H04L 45/30(2022.01)H04L 45/247(2022.01) H04L 1/22(2006.01) H04L 9/40(2022.01) H04L 67/12(2022.01) G06F 16/28(2019.01) G06Q 50/26(2012.01) (56)对比文件 CN 110716938 A,2020.01.21 CN 109242272 A,2019.01.18 CN 108446395 A,2018.08.24 CN 112969054 A,2021.0 6.15 审查员 李浩 (54)发明名称 面向警务大数据 的数据汇聚方法、 装置、 存 储介质和电子设备 (57)摘要 本发明公开了一种面向警务大数据的数据 汇聚方法、 装置、 存储介质和电子设备, 该方法具 体为: S1: 根据所需要传输的数据的类型和来源, 设置传输方式; S2: 根据传输方式设置主数据传 输通道; S3: 如果所需要传输的数据的来源为外 部网络, 则设置安全边界, 使得相关部门的内网 和外界网络之间实现安全隔离; S4: 采用主数据 传输通道对 数据进行传输。 本发 明解决了大数据 时代下智慧警务面临的不同来源或者不同类型 的数据难以汇聚问题, 同时为警务数据治理提供 数据支持, 从而提升 了相相关部门的处 理效率。 权利要求书2页 说明书5页 附图2页 CN 114070787 B 2022.10.04 CN 114070787 B 1.面向警务大 数据的数据汇聚方法, 其特 征在于, 具体包括如下步骤: 步骤1: 根据所需要传输的数据的类型和来源, 设置传输方式; 步骤2: 根据步骤1中的传输方式获取虚拟节点, 根据获取的虚拟节点设置与该传输方 式对应的主数据传输通道; 所述主数据传输通道包括外部数据传输通道和内部数据传输通 道; 步骤3: 如果所需要传输的数据的来源为相关部门的外部网络, 则在该数据对应的主数 据传输通道的内、 外部数据传输通道之间设置安全边界, 使得相关部门的内网和外部网络 之间实现安全隔离; 步骤4: 向主数据传输通道下发数据汇聚指令, 通过主数据传输通道从数据的存储介质 中抽取数据, 并将抽取的数据按照步骤1中的传输方式传送到警务大 数据系统中; 所述步骤1具体为: 当所需要传输的数据为关系型数据库中的数据时, 如果该数据来源 于相关部门的内部, 则将警务大数据系统直接与该关系型数据库连接, 否则采用ETL的方式 传输数据; 当所需要传输的数据以数据文件、 解析包或FTP形式存在时, 采用数据解析方式传输数 据; 当所需要传输的数据为轨迹类数据, 若该数据来源于相关部门的内部数据, 采用ETL的 方式将数据传输到警务大数据系统中的Kafka集群中, 否则采用FTP或Webservice的方式传 输数据。 2.根据权利要求1所述的面向警务大数据的数据汇聚方法, 其特征在于, 所述安全边界 包括边界数据接口单元和光纤设备; 所述外部数据传输通道通过边界数据接口单元与光纤 设备的光发生器端连接, 光纤设备 的光接收器端连接相关部门的内网接口单元, 相关部门 的内网接口单 元与内部数据传输通道连接 。 3.根据权利要求1所述的面向警务大数据的数据汇聚方法, 其特征在于, 所述步骤2具 体为: 所述外部数据传输通道和内部数据传输通道的建立方法相同, 具体为: 根据传输方式 获取以该方式进 行数据传输时所需要的若干个虚拟节点; 每一个虚拟节点对应若干个节点 设备, 在该若干个节点设备中随机选取一个节点设备作为该虚拟节点的节点设备; 获取每 个虚拟节点的配置信息, 所述虚拟节点的配置信息包括: 输入设备标识信息以及输出设备 标识信息, 所述输入设备标识信息为与虚拟节点的输入连接的设备 的标识信息, 所述输出 设备标识信息为与虚拟节点的输出连接的设备的标识信息; 所述设备包括数据的存储介 质, 警务大 数据系统和节点设备; 当某个虚拟节点的输入设备为数据的存储介质时, 该虚拟节点为初始虚拟节点, 该虚 拟节点对应的节点设备为初始节点设备; 当某个虚拟节点的输出设备为警务大数据系统 时, 该虚拟节点为结束虚拟节 点, 该结束虚拟节 点对应的节 点设备为结束节点设备; 当某个 虚拟节点的输出设备标识信息和另一个虚拟节点的输入设备标识信息相同时, 将该两个虚 拟节点连接; 将所有虚拟节点分别按输出设备的标识信息和输入设备的标识信息进行连 接, 从而得到一条从数据的存储介质到原始库的数据传输链路, 所述原始库为警务大数据 系统; 将各个节点设备按照数据传输链路上 的节点顺序进行连接, 从而得到一条主数据传 输通道。 4.根据权利要求3所述的面向警务大数据的数据汇聚方法, 其特征在于, 当数据来自相权 利 要 求 书 1/2 页 2 CN 114070787 B 2关部门的外部网络时, 在外部数据传输通道中选择某个节点设备对数据依 次进行RS编码, 冗余和扰码处 理。 5.根据权利要求3所述的面向警务大数据的数据汇聚方法, 其特征在于, 该汇聚方法还 包括根据步骤2建立备用传输通道, 所述备用传输通道的虚拟节点和主数据传输通道中的 虚拟节点相同, 且虚拟节点对应的节点设备不同; 当主数据传输通道正常工作时, 主数据传输通道和备用 传输通道同时接收数据, 主传 输通道于将数据传输至原始库, 备用传输通道对收到的数据进行缓存, 当缓存的数据达到 预设的上限时, 清除已缓存的数据, 重新进行数据缓存操作; 若主数据传输通道发生故障 时, 备用传输通道进行 数据传输, 原主数据传输通道转换为备用传输通道。 6.根据权利要求5所述的面向警务大数据的数据汇聚方法, 其特征在于, 所述备用传输 通道在接 收到数据后, 备用传输通道中的所有的节点对接 收到的数据进行核验, 验证数据 大小和字段元信息与需要传输的原始数据是否一致, 若不一致, 则发出告警, 并停止数据通 过主数据传输通道或者备用传输通道进行传输 。权 利 要 求 书 2/2 页 3 CN 114070787 B 3

.PDF文档 专利 面向警务大数据的数据汇聚方法、装置、存储介质和电子设备

文档预览
中文文档 10 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共10页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 面向警务大数据的数据汇聚方法、装置、存储介质和电子设备 第 1 页 专利 面向警务大数据的数据汇聚方法、装置、存储介质和电子设备 第 2 页 专利 面向警务大数据的数据汇聚方法、装置、存储介质和电子设备 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 21:03:00上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。