公安涉烟大数据研判分析平台

　　1、适用业务

　　公安涉烟大数据研判分析平台，适用于公安治安和烟草部门打击涉烟违法犯罪行为场景。通过搭建平台，汇聚公安和烟草部门的数据资源，打通两部门之间的数据通道；通过数据穿透加强数据挖掘，实现烟草部门行政案件数据和公安部门涉烟刑事案件数据的有效聚合，构建警烟协同作战体系；结合大数据技术，对各涉烟要素数据进行广泛、深入地比对碰撞和分析研判，从中发现未知的风险线索，实现对涉烟要素的智能化、动态化管控。平台将“技术、数据、经验”有机结合，为公安和烟草部门提供涉烟线索/案件管理、涉烟线索智能研判、涉烟风险预警、打击战果呈现等实战功能，解决涉烟线索发现难、取证难的问题，具有实用性、高效性、独特性和可复制性等特点。

　　2、平台构成

　　平台具备数据全流程处理与应用能力。通过汇聚整合公安和烟草部门数据资源，从涉烟违法犯罪重点关注的人流、物流、资金流、信息流等“4流”数据入手，进行数据接入与治理；对涉烟案件中零星、孤立和碎片化案源线索进行多维度、多关联、多层次分析和数据多点碰撞，构建平台模型战法集、综合研判和数据可视化三大功能模块，实现涉烟行为风险预警、涉烟数据智能研判；基于烟警联动业务规则，内置线索流转、联合研判、研判处置和结果互通线索流转机制，实现涉烟线索移交处置、涉烟案件集成管理，同步呈现打击战果。平台结合数据的深度应用和业务的流转机制，最终输出如高危人群行为监测图表、重点人员关系图谱、涉烟犯罪重点区域图等，在此基础上结合办案人员的经验核查，优化相关研判手段，进而实现对涉烟犯罪的事前预测、事中预警和事后追溯。

　　数据层面，打通全数据链价值。整合专卖、公安大数据、内管系统和其他相关平台各类涉烟信息，构建烟草、公安各自的高危人群库、前科人员库、违法行为库等专题数据库，打破数据孤立化、碎片化局面，为分析研判提供数据基础。同时设计以平台数据算法为支撑的态势感知分析、类罪模型搭建等符合实际的功能模块，并从中发现涉烟违法线索和规律，为案件串并、人员比对、证据固定等提供智能研判辅助。

　　应用层面，丰富研判分析工具。通过贯彻“APCD”工作法，对烟草局和公安数据全维关联，要素提取，同时逐步完善对涉烟资金、话单、物流寄递、轨迹的专题业务战法，多警种共享共建公安涉烟大数据知识图谱，打造打击涉烟犯罪应用生态圈。

　　业务层面，打造全省一盘棋。自下而上的线索分析协助请求，自上而下的预警情报核实指令；在烟警线索协同基础上，各自具备从线索挖掘到立案侦查全流程；纵向省市县分级授权，优化线索上报流程，提升线索时效性；横向各地市联合作战，“小案并大案”，提升线索挖掘/案件侦查的实战效率。

　　3、核心技术

　　在数据处理过程中，主要实现数据的采集、标准化处理、数据清洗治理与分析计算。对于数据库文件，以Logstach为基础，通过Jdbc写入Greenplum数据库；对于离线文件，采用spring boot,在ETL中进行数据的读取、过滤、转化等，最终通过Jdbc导入Greenplum数据库。

　　在数据存储过程中，主要完成对转发来的数据进行接收、存储工作。通过三种不同介质Greenplum，Mysql，Redis，分别存储不同类型数据。其中寄递数据、公安数据等数据源存入Greenplum中实现多数据源管理，配置数据、用户/角色/权限存入Mysql中，专题数据、报表统计数据、标签/字典，登录权限信息存入Redis中，并将把最终数据转发至服务层。

　　在数据应用过程中，主要实现基础数据的管理和模型的计算和业务分析的可视化。采用spring boot、SparkSQL等技术进行模型计算、专题计算。从大量的数据中通过一定算法搜索隐藏于其中有价值信息的过程，基本方法包括集合碰撞、多单合并、反相碰撞、核心团伙、关键人物等，基本任务包括分类与预测、聚类分析、关联规则、时序模式、智能推荐等。

　　在数据展示过程中，采用前后端完全分离的机制，通过VUE，JS，echarts等技术搭建前端架构，通过leaflet构建离线地图，使用http协议进行前后端的数据通信。提供灵活的展示方式，对案件信息与寄递信息进行检索，对专题进行维护和查询，对统计结果进行图表化展示等。

　　在数据对接过程中，主要是以restful协议的接口对外提供服务。通过前端接口支撑前后端交互；通过后端接口进行数据维护、报表统计、数据接入；通过外部接口对接案件数据、专题数据、预警信息等第三方数据。

　　4、适用技术平台

　　平台基于hadoop分布式架构，体系规范方面，采用浏览器+服务器+数据库体系，具备易部署、易维护、易使用和易升级等优良特性；服务构架方面，采用面向服务的架构，着眼业务应用；平台技术方面，适应海量数据批量计算和离线计算场景。平台构建了涉烟文本数据清洗与整合、图形化模型搭建和可变规则的涉烟犯罪危险预测，实现了烟草端和公安端内外数据资源集聚整合、各类涉烟线索的自动挖掘、态势的智能分析。

　　基础数据，主要对数据进行采集、汇聚、清洗和治理工作，数据来源包括社会数据、公安内网数据、烟草局数据等。采集方式主要包括与其他平台对接、互联网采集、文本导入等方式，能够动态从Kafka、数据库(Mysql，Oracle)、文件进行数据的接入处理。

　　数据服务，按照业务需求的方式和规则，采用自研的数据编排引擎对基础数据进行ETL处理，将基础数据映射为业务所需的基本存储单元。通过对数据进行归并、存储、处理，提供研判所需的基础知识库、业务知识库、专题库等。

　　业务中台，主要运用Apache Spark、Flink等主流的大数据引擎，对数据进行汇聚计算，同时引入Spark MLlib、NEO4J图引擎等先进的数据分析/AI分析系统，根据客户需求实现各种场景的建模要求，支撑上层业务灵活使用。

　　实战中心，提供统一的业务应用门户，具备统一登录、统一认证、自主建模、动态统计、预警监测、积分画像等各类业务应用服务。各业务模块采用模块化设计，有利于系统扩展和个性化业务定制的灵活性。充分运用人工智能新技术突破人力极限，在数据挖掘、特征提取、算法优化、模型构建、知识总结和规律发现等方面实现新突破。

　　5、创新点

　　涉烟犯罪模型自动搭建。内置丰富模型库，为办案人员屏蔽繁琐复杂的模型搭建流程，帮助精准识别隐匿涉烟犯罪。对涉烟数据中心中已掌握的多种涉烟要素、历史案件信息等进行分析和数据挖掘，通过人员关系、物品关系、窝点关系、案件关系、物流信息、人员车辆活动轨迹等信息进行深入布控， 深入分析涉烟案件内在共同点、行为特征、轨迹范围等关键信息，从而发现不同案件、不同人员、不同物品、不同关系、不同窝点等要素之间的联系，对重点人员、重点车辆、重点物品、窝点位置、可疑物流等涉烟要素进行定义元数据，构建算法，勾勒关联，形成预警报告。

　　案件一键分析简化操作。通过对人、车、物、轨迹等分析，对嫌疑人员进行全方位的拓展研判，实现从人到案、从车到案、从物到案、从案到案的多维分析，提升办案人员分析研判效率。同时辅以线下人员的协作跟进、摸排核实、深入研判，进而形成基于多维关联分析的线索拓扑图，从中提取更具指向性的案源线索。统计涉案金额，通过模型和算法的迭代优化，实现要素数据的实时自动分析，及时推送刑事案件线索，形成行刑无缝衔接，强力支撑案件侦办。

　　烟警联动线索流通共享。目前的涉烟类犯罪手段多样，更新快，单靠烟草稽查部门的力量难以从根本上解决目前涉烟犯罪高发的态势，需要借助公安食药环和技侦、网安等部门的力量从资金流，信息流，人员流，物流等多方面入手，结合公安的优势和资源，建立数据共享和业务协同的机制，将相关线索通过平台推送给公安端，由公安端进行侦查办案，将案件结果和进度定期反馈给烟草部门，减少线下沟通发送协查及协查结果回传时间，提升办案效率。

　　6、可解决的问题

　　基于烟草和公安的全流程线索研判机制，利用平台功能对寄递、通联、稽查、案件等数据进行综合研判，预测涉烟违法行为发展趋势，关注地区案件态势，解决了公安和烟草部门线索联动弱、数据利用效率低、数据应用场景少、涉烟犯罪监管难点等问题。

　　运用成效：通过在公安网和烟草专网分别搭建系统平台，一方面利用公安数据资源和研判工具优势，另一方面充分发挥烟草稽查部门情报线索搜集作用，形成了线索搜集、分析研判、核查处置的闭环工作机制。通过深化数据应用，加强情报导侦，提升了打假打私工作效率，初步实现了对重点地区的有序管控、对重点对象的有力监管、对疑难重点案件的有效查办，从长远目标来看有助于净化本地烟草市场，保障国家税收，保护消费者权益。

　　可操作性：⑴随着涉烟违法犯罪活动打击难度的增大,对涉烟数据进行有效的管理和利用尤为重要，市场需求为平台实施提供市场支持。当前，依托大数据技术整合涉烟情报资源，实现跨部门、跨人员、跨系统之间的情报协同作战，提升涉烟线索利用率，是符合现阶段打击涉烟违法犯罪工作实际需求。⑵项目经验为平台实施提供技术支持。平台通过对烟草和系统海量数据进行深度挖掘，并围绕着打击涉烟业务的实际需求而设计研发。公司长期服务于公安信息化领域，服务了公安部、广西公安厅及部分地市、山西公安厅、天津市公安局等多个公安体系客户和部分烟草局。平台部署简单，可操作性性强。

　　可复制推广：⑴契合市场需求，《2022年全国烟草专卖管理工作会议》强调要强力打击涉烟违法犯罪活动，强化协作联动，力破大案要案，实现精准打击。烟草部门与公安协同作战打击涉烟违法犯罪已成为行业发展趋势，同时各省市公安、烟草部门也迅速响应、主动对接，第一时间成立联合工作协调小组，深入烟警信息化平台的建设需求。⑵低耦合高服务化，整个平台与烟草和公安打击涉烟犯罪业务紧密结合，能够与烟草专网和公安网现有的、在建的、将建的各相关系统进行有效的对接，业务流程规范、技术手段成熟，是烟警协同作战、人机融合作战实践的成功案例，对促进打击隐匿性涉烟犯罪有很大帮助。对于全国各烟草部门和公安部门具有极高的借鉴价值，可快速复制、大力推广。

　　7、演进方向

　　打击涉烟犯罪工作是一项长期性、复杂性、系统性的工程，需要不断改进打击手段来适应犯罪模式的新变化，需要完善预警模型实时掌握违法犯罪活动规律。我公司未来将研究更多打击涉烟犯罪实战应用模型，推动平台向轻量化工具的转变，从打击个案环节上升到打击假烟的生态链，建立“防控打”一体化思维体系，在实战中不断优化，持续提升公安机关的打击能力和水平。

　　责任编辑：广汉