回顾2022上半年,各地网络谣言多发,个别事件更是掀起超高的曝光量和讨论热度,令谣言受害者遭受损失,影响着社会的稳定和谐。

 例如今年6月,一则关于广西“金田水库泄洪”的视频,配文“广西暴雨III级应急响应”,在各大社交媒体上传播,引发一定的恐慌。

来源:头条辟谣

后经广西互联网举报中心核实该信息不实,才让这起谣言终止。但事实上,诸如此类的谣言屡见不鲜,通过剪辑的视频与嫁接的音频,构成一个个“虚构故事”,比如“玉林容县将迎来历史罕见的超大特强暴雨”,“桂平学生持刀殴打同龄年人”等不实消息在短时间内得到了大量网民的转发。

随着5G技术的发展,视频媒介的传播更为直接而快速,相应地更多舆情事件、谣言正从视频、音频平台传播扩散并快速发酵,给相关监管部门带来了挑战。

来源:网络

 如何快速廓清谣言,成为相关部门身上的“重担”。正所谓造谣容易,辟谣难,其难点之一就是面对如此海量、复杂的信息,如何顺藤摸瓜快速找到源头。大家都知道以往仅通过文本关键词的检索方法,出现的也只是文本信息,同时可能出现信息发现不全面、侵权线索不容易发现、信息难以合并、追溯难度大等问题。
 因此,想要快速追查源头,遏制谣言,关键还是要从技术入手:突破不同模态间的壁垒,实现跨模态信息检索。

蜜度自主研发的跨模态检索引擎——MiduCMR,突破传统的单一模态的信息检索方式,实现视频、音频、图片、文本等不同模态信息在统一语义空间中的跨模态检索,解决信息发现不全面、信息难以合并、追溯难度大等问题。

 针对网络谣言,MiduCMR从微博、论坛、App、短视频等来源的多模态信息中,将海量全媒体信息映射到统一语义空间,进行自动理解、关联多模态间的关键要素,快速检索出相同语义的视频,快速追踪来源,为相关部门辟谣提供有力支撑,遏制谣言散播。

例如上述的关于广西“金田水库泄洪”的谣言就可借助MiduCMR来追溯源头。输入关键词“金田水库泄洪”,通过MiduCMR的跨模态自动语义识别对海量的信息进行检索,迅速找到近似度最高,发布最早的相关文字、图片、视频等信息。相关人员再经过甄别、比对,即可跟踪谣言线索,再通过平台联系原视频的作者,最终确认网上发布的“金田水库泄洪”为谣言。

除此之外,MiduCMR可以将多模态信息进行整合及联合表征,实现视频内容的一体化识别。比如上传“金田水库泄洪”视频检索相关信息,即可检索出类似的泄洪视频,即使在传播过程中涉及音、视频发生裁剪、编辑等二次创作的情况,也可被检索出来。MiduCMR可以准确解析视频中的字幕、背景、封面等特征元素,相关人员可以根据相关信息排查其真实性和传播范围,预防次生谣言的发生。

简而言之,MiduCMR跨越模态的语义鸿沟,不仅可以通过文字检索图片、视频,也可以通过图片检索图片、视频,还可以通过视频检索视频,更可以合并相似视频,大大提高检索效率,从而快速追溯谣言源头,遏制谣言散播。

值得一提的是,MiduCMR还可进行情绪识别。通过文本可以对图片和视频中的人物的面部表情、肢体动作等进行识别,将更多的情感信号融合理解,从而让人机在“情绪”上形成互通。

基于跨模态检索引擎MiduCMR的强大作用,蜜度推出蜜度索骥2.0升级版本。目前,蜜度索骥已经实现常规场景快速识别、提取,271个特殊场景加强识别等功能,可以为社会治理、互联网内容安全、经营决策的数字化升级场景提供支持。

未来,蜜度将尽情释放跨模态搜索引擎MiduCMR的“存在感”,推出更多的跨模态检索产品,为数字政府、数字营销、数字媒体、数字城市等场景助力赋能。