中关村科金与哈工大联手，多模态伪造检测再突破！

中关村科金与哈工大联手，多模态伪造检测再突破！

引用

百度

等

12

来源

1.

https://baijiahao.baidu.com/s?id=1762777847213299792

2.

https://new.qq.com/rain/a/20230410A0583V00

3.

https://blog.csdn.net/qq_19600291/article/details/145572766

4.

https://m.thepaper.cn/newsDetail_forward_29136504

5.

https://www.zkj.com/multi-mode

6.

https://cloud.tencent.com/developer/article/2261430

7.

https://www.zkj.com/industry_news/5701.html

8.

http://www.51ima.com/news/6671.html

9.

https://www.zkj.com/tag/219.html

10.

https://www.bilibili.com/video/BV1rh4y1p7ak/

11.

https://www.cac.gov.cn/cms/pub/interact/downloadfile.jsp?filepath=NUtqEIwGiCjGm2Bhl20cvGRCcj7aq8/IfDQHMJBi3FTp7KCrCEuporommi/WbhQ5bEP7QsDin4Dd6nfs/DW6RDZS2/Bjnic3oqu3HpPj8kk=&fText=%E5%A2%83%E5%86%85%E6%B7%B1%E5%BA%A6%E5%90%88%E6%88%90%E6%9C%8D%E5%8A%A1%E7%AE%97%E6%B3%95%E5%A4%87%E6%A1%88%E6%B8%85%E5%8D%95%EF%BC%882024%E5%B9%B46%E6%9C%88%EF%BC%89

12.

https://m.renrendoc.com/paper/291351969.html

近日，中关村科金与哈工大（深圳）在多模态伪造检测领域接连取得重大突破，为应对日益严峻的AI伪造威胁提供了新的解决方案。

中关村科金推出的多模态防伪大模型，以其卓越的检测能力和广泛的适用性引起了业界关注。该模型能够精准识别包括AI换脸、高清视频翻拍、3D面具、打印照片、电子屏幕、语音重放或拼接等多种攻击手段，拦截率高达98%以上。

该技术已在多家金融机构落地应用，例如在某股份制商业银行的信贷风控场景中，通过人脸和声纹相结合的核验防伪技术，将高危攻击方式的拦截率提升到98%，保障了过亿资金的安全落地。此外，该技术还支持声纹、声信号采集等多种活体检测技术，进一步提高了安全性。

来自哈工大（深圳）和南洋理工大学的研究团队提出了全球首个「多模态DeepFake检测定位」模型（DGM4），该模型不仅能够判断输入图像-文本对的真假，还能定位具体的篡改内容，如图像篡改区域和文本篡改单词。

研究团队构建了首个大规模多模态媒体篡改数据集，包含23万张图像-文本对样本。提出的HAMMER模型采用层次化多模态推理架构，通过篡改感知的对比学习和局部块注意力聚合机制，实现了对多模态篡改的精准检测和定位。

实验结果显示，HAMMER模型在多模态篡改检测和定位任务上均表现出色，能够准确识别图像和文本中的细微语义不一致性，为打击多模态假新闻提供了有力工具。

中关村科金的技术侧重于实际应用和产品化，已在多个行业落地；而哈工大的研究则更侧重于学术创新和理论贡献，为未来的研究提供了新的方向和数据支持。两者相辅相成，共同为构建更安全的信息环境贡献力量。

随着AI技术的不断发展，多模态伪造检测将成为信息安全领域的重要课题。中关村科金和哈工大的这些突破，不仅展示了中国在AI安全领域的技术实力，也为全球应对AI伪造威胁提供了新的思路和解决方案。