今天给大家介绍的是一种专为生成个性化二维码而设计的新方法Face2QR,可以将美观、人脸识别和可扫描性完美地融合在一起。
下图展示为Face2QR 生成的面部图像(第一行)和二维码图像(第二行)。生成的二维码不仅忠实地保留了面部识别功能,还可以进行扫描,以后个人名片就这样用了!
相关链接
-
论文:http://arxiv.org/abs/2411.19246v1
-
代码:https://github.com/cavosamir/Face2QR(即将开放)
论文阅读
摘要
现有的生成美观二维码的方法,例如图像和风格转换技术,在结合人脸识别时,往往会损害二维码的视觉吸引力或可扫描性。为了解决这些缺陷,论文提出了 Face2QR——一种专为生成个性化二维码而设计的新型流程,将美观、人脸识别和可扫描性完美地融合在一起。
Face2QR引入了三个创新组件。首先,ID 精炼二维码集成 (IDQR) 将背景样式与人脸 ID 无缝交织在一起,利用统一的稳定扩散 (SD) 框架和控制网络。其次,ID 感知二维码 ReShuffle (IDRS) 有效地纠正了人脸 ID 和二维码模式之间的冲突,重新排列二维码模块以保持面部特征的完整性,而不会影响可扫描性。最后,ID 保留 可扫描性增强 (IDSE) 通过潜在代码优化显著提高了扫描稳健性,在人脸 ID、美学质量和 QR 功能之间取得了微妙的平衡。
在综合实验中,Face2QR 表现出卓越的性能,优于现有方法,特别是在自定义 QR 码设计中保留面部识别特征方面。
方法
Face2QR 的流程是一个无需训练的过程,用于生成与 ID 一致且 可扫描的二维码图像。我们的流程有三个阶段,分别用蓝色、红色和绿色箭头表示。IDRS 模块在控制过程中解决了人类身份和二维码图案之间的冲突 ,而 IDSE 模块减少了编码错误,以确保输出可扫描。
IDRS(左)和 IDSE(右)的图示。在 IDRS 中,保留面部和标记区域(红色和黄色蒙版)内的信息代码,并相应地重新映射其余模块。在 IDSE 中,论文加强了查找器和对齐模式,并使用自适应损失在潜在空间中进行更新,以增强可扫描性。
结果
不同方法的视觉比较
收集的普通人真实面部图像(第 1 行),使用 StyleGAN2生成逼真的 面部(第 3 行左侧三张),并生成卡通面部(第 3 行右侧三张)以及相应的 QR 图像(第 2 行和第 4 行)。
身份保存与 InstantID 的视觉比较。
使用不同姿势的人脸图像(第一行)生成二维码图像(第二行)。
结论
论文提出了Face2QR方法,可在二维码生成过程中无缝集成人脸 ID、 美学设计和可扫描性。通过引入三个关键模块,即用于将人脸 ID 与美学背景相结合的 IDQR、用于解决人脸 ID 和二维码图案之间冲突的 IDRS 以及用于在保留人脸 ID 和美学质量的同时增强可扫描性的 IDSE,
该方法能够在三个固有冲突的控制信号之间取得平衡,并生成同时保留人脸 ID、美学质量和可扫描性的二维码。大量实验表明,Face2QR 明显优于以前的方法,为生成保留 ID 的美学二维码建立了新的基准。