如何使用机器学习来并排创建相反图像的组合

数据挖掘 机器学习 计算机视觉
2022-03-09 20:23:09

灵感来源:两个世界的图片

在此处输入图像描述 在此处输入图像描述

我只想创建一个机器学习模型,可以自动将相反的图像组合成一张图像。

我正在考虑两种可能的解决方案:

  1. 姿势估计:从图像数据中检测人类及其姿势并按姿势搜索档案,但完全脱离上下文。

  2. 陆线:探索类似的线路。

这只是我的想法,你有什么建议吗?谢谢

2个回答

也许像 GAN 这样的东西会起作用。它可以使用一些基本图片并更改上下文,添加一些相反的属性。有一个生成对抗风格转移网络的例子来澄清我的意思http://openaccess.thecvf.com/content_cvpr_2018_workshops/papers/w41/Palsson_Generative_Adversarial_Style_CVPR_2018_paper.pdf在这个例子中,年龄是由模型改变的,它看起来很自然,因此外观状态也可能发生变化(从穷到富,反之亦然) https://neurohive.io/en/news/gated-gan-style-transfer-with-multiple-styles/ 第一张带有女孩的图像传达gan 使用的想法,但应该考虑更多。

如果你有很多图像组合的例子,你可以做的是使用带有 CNN 的深度学习模型来评估两个图像是否适合组合:即监督学习。该模型将两个图像作为输入,并输出组合在一起的概率。在非常大的数据库中找到与给定图像组合的最可能的候选对象可能很有用