论文题目:Isometric 3D Adversarial Examples in the Physical World
会议:NIPS 2022

点云

点云——表达目标空间分布和目标表面特性海量集合,点包含xyz坐标信息 能够包含颜色等其他信息

使用顶点、边和面的数据表征的三维图形表面顶点包含坐标信息,面片常用顶点编号表示,同时可以附加纹理颜色信息

点云mesh是常用的3D表示数据获取容易(使用RGBD相机结构相机激光雷达可以获取到)、应用广泛(点云常用与自动驾驶、医疗点云数分割mesh可以用于3D打印比如游戏角色建模),值得一提的是点云mesh可以方便地互相转化(利用meshlabpcl工具可以从点云数导出mesh上,反之也可以mesh采样得到点云

在这里插入图片描述

为了适应越来越广泛的点云应用,近年来涌现出了许多点云模型用于完成各类任务分类部件分割语义分割等,常见的如这种基于MLP+POOling层的POINTNET结构、还有基于卷积的DGCNN、还有一些基于transformer的、基于卷积的…….

对抗样本

在原数据添加人眼难以识别的细微扰动使得模型分类出错

深度神经网络是脆弱的,很容易被一些精心设计的数据所攻击,这也是对抗样本概念,即在原本的干净数据上添加人眼难以识别的细微扰动使得模型分类出错。图中的就是两个很好的例子比如左图的飞机、瓶子都被攻击成了植物,右图放置于车顶的激光雷达使得该车无法被检测到、3D打印出的对抗mesh由床被识别为板凳。
在这里插入图片描述
本质上是在给定约束条件下求最优

点云攻击方法

1、点扰动;对现有点改变其位置导致模型分类出错

2、点添加;在当前云上添加独立的点、簇或小物体导致模型分类出错

3、点删除;根据不同点对于分类结果的贡献删除显著点

总结现有方法存在问题
1、首先由目前攻击方法生成对抗点云仍然存在许多离群点、表面不够平滑,当进一步转化为mesh用于3D打印时,由于重建算法存在误差 很多对抗性较强的点直接消除
2、即使能够被有效重建为mesh参考下图中的图一 无法被精准打印出来,图二的情况则是不可察觉性很差
3、现实世界构造出的对抗物体面临着视角变化,扫描出的点云 许多对抗性较强位置可能被遗漏掉
在这里插入图片描述

提出方法

1)直接mesh进行攻击,防止引入重建误差

2)使用ε−isometry约束扰动,提升不可察觉性

3)模拟物理转换时发生的变换,并将其视为maxmin问题

在这里插入图片描述
在这里插入图片描述

实验结果

在这里插入图片描述

原文地址:https://blog.csdn.net/q15516221118/article/details/134660328

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任

如若转载,请注明出处:http://www.7code.cn/show_46830.html

如若内容造成侵权/违法违规/事实不符,请联系代码007邮箱suwngjj01@126.com进行投诉反馈,一经查实,立即删除!

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注