安徽:利用人工智能技术开展预警信息质控

责任编辑:zsheng

2019-02-27 07:44:49

摘自:中国气象报社

日前,安徽省突发公共事件预警信息发布中心利用人工智能技术,研发基于智能语义感知的预警信息合法性检测系统。不用通过事先设定敏感词过滤库(“黑名单”),基于历史预警信息,通过机器学习算法,建立预警信息“白名单”,新的预警信息通过“白名单”的正向常用词库检索技术,一旦有敏感词,将提示复核人员进行人工干预,从而提高对预警信息内容正确性的检验能力,该技术可以适用各省的预警信息发布系统。

预警信息内容的正确性直接关乎预警发布的有效性和权威性。目前的信息敏感词检测技术常见的方法是“黑名单”法,即事先把能群举的敏感词录入库中,发布预警信息时通过对比是否有“黑名单”中的敏感词,起到质控作用。

和“黑名单”法不同,安徽省预警信息中心利用双向长短期记忆条件随机场(Bi-LSTM-CRF)算法,通过双向循环神经网络(Bi-LSTM)对已有的合法预警信息文本数据集和开放域中文分析公开数据集进行训练,建立预警信息合法“白名单”。通过该技术建立的检测系统,能直接有效地对新的预警信息中可能含有的敏感字(词)、错别字等进行智能监测。

链接已复制,快去分享吧

企业网版权所有©2010-2025 京ICP备09108050号-6京公网安备 11010502049343号