3d-photo-inpainting

3D立体照片生成工具
授权协议 MIT
开发语言 Python
所属分类 神经网络/人工智能、 机器学习/深度学习
软件类型 开源软件
地区 不详
投 递 者 周凯捷
操作系统 跨平台
开源组织
适用人群 未知
 软件概览

这是一款能够将平面图片渲染出动态 3D 景深效果的开源 AI 工具。效果示例如下:

作者提出了一种将单个 RGB-D 输入图像转换为 3D 照片的方法,即一种新的视图合成的多层表示方法,该方法包含在原始视图中被遮挡区域的幻觉颜色和深度结构。作者使用具有明确像素连接性的分层深度图像作为底层表示,并提出一个基于学习的修复模型,该模型以空间上下文感知的方式将新的局部颜色和深度内容迭代合成到遮挡区域。使用标准图形引擎,可以使用运动视差有效地渲染生成的 3D 照片。作者在一系列具有挑战性的日常场景中验证了该方法的有效性。

测试环境

  • Linux ( Ubuntu 18.04.4 LTS)
  • Anaconda
  • Python 3.7 (3.7.4)
  • PyTorch 1.4.0
  • 其他的 Python 依赖项:
opencv-python==4.2.0.32
vispy==0.6.4
moviepy==1.0.2
transforms3d==0.3.1
networkx==2.3
cynetworkx
scikit-image
  • 运行以下指令开始安装:
conda create -n 3DP python=3.7 anaconda
conda activate 3DP
pip install -r requirements.txt
conda install pytorch==1.4.0 torchvision==0.5.0 cudatoolkit==10.1.243 -c pytorch
  • 下载模型权值:
    chmod +x download.sh
    ./download.sh

更多详情请查看软件主页

  • 总述 本篇论文采用的baseline不是CE,而是2017 ACM的《lobally and locally consistent image completion》,那篇论文以CE为baseline,引入了全局鉴别器和局部鉴别器。这篇文章提出了上下文注意力层,使得可以关注到距离缺失区域较为遥远的像素点;此外,作者摒弃了之前常用的DCGAN,而是使用创新地WGAN-GP,还采用了两个encoder

  • 教程给出 环境配置 和 测试结果 和论文源码 论文项目地址:https://gitcode.net/mirrors/vt-vl-lab/3d-photo-inpainting?utm_source=csdn_github_accelerator requirements.txt pytorch==1.4.0 torchvision==0.5.0 opencv-python==4.2.0.32

  • 2d转3d demo 实践 原始git:https://github.com/vt-vl-lab/3d-photo-inpainting 1.下载项目 1.切结,要先下载项目。 2.git clone下载不动就换浏览器下载。   2.配置环境 1.按提示安装就行了,无非就是源太慢,换成国内的源,然后不停重试,总会下载完毕。anaconda,pypi这些都需要换。 2.下载模型,基本下载不动。124

 相关资料
  • Since 8.1 photo 拍照/选择照片 不推荐使用,建议使用新的chooseImage接口 使用方法 AlipayJSBridge.call('photo', { dataType: 'dataURL', imageFormat: 'jpg', quality: 75, maxWidth: 500, maxHeight: 500, allowEdit: true,

  • 描述 (Description) Photo浏览器类似于iOS照片浏览器组件,用于显示图像组,可以进行缩放和平移。 要在图像之间滑动,照片浏览器使用Swiper Slider 。 下表显示了framework7中使用的照片浏览器类型 - S.No 照片浏览器类型和说明 1 创建照片浏览器实例 可以仅使用JavaScript创建和初始化照片浏览器。 2 照片浏览器参数 Framework7提供了一个

  • 在本节中,我们将学习如何创建3D立方体。因此,首先创建六个相同大小的四边形,并以这样的方式放置它们,通过连接它们,我们将得到一个合适的立方体。我们还将旋转这个立方体以查看它的所有侧面。 要创建旋转立方体,请查看以下示例: 输出结果为:

  •        LocaSpaceViewer中可以根据出游拍摄的照片生成出游轨迹,在地图上直接显示路线,点击该点可以看到加载的图片。在“数据处理”菜单中,点击“照片生成路径”,在弹出对话框中,选择照片所在文件夹进行照片加载,加载结束后将自动显示加载图片的信息,包括照片的拍摄时间和位置信息都可以看到,如果其中有照片的GPS信息不完整,那么就会提示无法识别该照片,进而无法生成路径。勾选“生成缩略图”可

  •        LocaSpaceViewer中可以根据出游拍摄的照片生成出游轨迹,在地图上直接显示路线,点击该点可以看到加载的图片。在“数据处理”菜单中,点击“照片生成路径”,在弹出对话框中,选择照片所在文件夹进行照片加载,加载结束后将自动显示加载图片的信息,包括照片的拍摄时间和位置信息都可以看到,如果其中有照片的GPS信息不完整,那么就会提示无法识别该照片,进而无法生成路径。勾选“生成缩略图”可

  • 描述 (Description) Framework7为您提供了许多照片浏览器模板,您可以将其传递给照片浏览器初始化。 导航栏模板 以下代码显示了navbar模板的示例,您可以在navbarTemplate参数中传递该navbarTemplate - <div class = "navbar"> <div class = "navbar-inner"> <div class =