基于移动设备的便捷三维人体重建

我们基于移动设备提出了一个对用户友好的三维人体重建方法。我们基于训练库直接从着装剪影学习出人体参数,则可以省去基于标志点的人体参数优化这一步骤,进一步提高重建效率,为基于移动设备的三维人体重建奠定了基础。参数回归方法以着装剪影作为输入,为了直接使用手机拍摄的照片,我们在移动端开发了一个对用户友好的交互抠图工具,用来从日常照片提取着装人体剪影。

我们基于GrabCut方法开发了一个对用户友好的交互式抠图工具。如图所示,用户首先输入矩形框的两个角点,其次交互式地输入一些暗示前景与背景的线条。当GrabCut 方法执行完毕后,划分出的背景区域颜色变暗,用户可以根据当前划分结果决定是否需要增添新的标记。由于屏幕尺寸有限,为了让用户交互更加方便,我们开发了放大缩小图像的功能。值得一提的是,人体区域是连通的,且着装人体轮廓往往是分割结果中最大的轮廓。所以,我们计算了分割掩码图像中的轮廓,并保留最大的轮廓来生成着装人体剪影。以图中倒数第二个子图为例,尽管图中有些背景区域没有被分割出来,但由于其所在轮廓为小轮廓而被舍弃,我们依然可以提取到正确的前景。

基于移动设备的便捷三维人体重建总体框架