大数据排查是怎么排查的

2023-12-12 10:55:49 59 0

排查的方式类似于“上学时班级清点、核对人数”,区别在于核对、校对的数据来源和载体不同,上学时班级清点、核对人数是参照学籍人员名单和报道人数,而排查是利用网络来收集数据,然后使用人工智能进行核对,比如疫情期间的行程码、健康码,以及公安部门使用的天眼、国家统计局的人口普查等,都是普查、排查的经典案例。

一、确定存在问题的数据

排查是通过收集、清洗和分析大量的历史数据来确定存在问题的数据。这种过程能够揭示历史数据中有潜在问题的可能性,以鉴定可能存在的问题。

1. 基于分析的关联分析。通过对海量数据进行关联性分析,找出各种数据之间的关系,从而确定存在问题的数据。

2. 基于数据挖掘的异常值检测。通过数据挖掘技术,对大量数据进行分析和比较,找出与其他数据明显不同的数据,进一步排查是否存在问题。

二、安全性问题

排查过程中存在着安全性的问题,需要进行有效的安全措施来保护数据的安全。

1. 数据加密技术。通过加密算法对数据进行加密,使得未经授权的人无法解读数据,确保数据的安全。

2. 访问权限控制。对于敏感数据,限制访问权限,只有经过授权的人员才能查看和使用这些数据,从而保障数据的安全性。

三、基于技术的排查方法

排查需要运用先进的技术手段来实现。

1. 基于启信慧眼的准入排查-关系排查。通过批量上传意向供应商名单以及存量供应商名单,再根据筛查偏好自由勾选任职关系、投资关系、疑似关系、上下游关系等关系类型,即可轻松进行排查。

2. 时间段筛查。一般会先根据时间段来筛查。一般是从晚上9点之后有频繁的往来金额转账,特别是在深夜的时候有固定的交易金额是很容易被盯上的。

3. 当日派单、落位、核酸。疫情防控核查需要当日派单、当日落位、当日核酸,确保数据的及时性和准确性。

四、排查法

排查可以采用不同的方法和技术手段进行。

1. 电话排查法。相关智能单位可以通过电话人员比对信息,核查人员行程,最终将各类人员信息进行详细分类、汇总成册。

2. 技术排查法。可以采用现代化的技术手段,利用技术进行数据分析和关联分析,找出存在问题的数据。

五、实际应用案例

近期,疫情防控工作中排查起到了重要的作用。

1. 海淀社区防控组数据组。该组织利用排查工具,对社区居民进行排查和核对,以建立健全的疫情防控网。

2. 上海市防控办的排查。根据排查情况,向可能存在潜在风险的人员发送提醒短信,提醒他们关注自己的健康状况。

3. 新冠病毒潜伏期的排查。疫情防控中的排查一般持续14天,根据新冠病毒的潜伏期设定。

排查是通过收集、清洗和分析大量的历史数据来确定存在问题的数据。在排查过程中需要考虑的安全性问题,并采用先进的技术手段进行排查和分析。电话排查法和技术排查法是常用的排查方法。实际应用中,排查在疫情防控等方面发挥着重要作用。

收藏
分享
海报
0 条评论
4
请文明发言哦~