画像修正、画像復元、インペインティングの仕組み - memeplex @ ウィキ

インペインティングとは

• 勉強したてなので、ざっくりとした解説しかできないが、ざっくりと理解できれば、と思う
• インペインティングとは
• 指定した部分の画像を修正、復元することができる技術のことである
• グーグルピクセルがCMでよくやってるやつ。
• 画像の外や続きを生み出す技術は
• 「アウトペインティング」と呼ぶ。
• こちらも画像の外側を「復元」してるということなので、まったく似たような技術が使われているっぽい。

仕組み

• ざっくり言うと、指定した部分の周辺の画像データをひきのばして修復してるってこと
• ひきのばしだけだと復元としてレベルが低いため、画像全体からデータを取り、画像全体の法則に基づいて指定した部分を修復している。それが「インペインティング」
• 画像全体のデータから画像の外側を新たに作り出してるのが「アウトペインティング」
• dall-eのインぺインティング、アウトペインティングはこういう技術で行われてるっぽい。

2018年の記事だがまだ未発達な時代なことが逆にシンプルでわかりやすいと思う
https://lp-tech.net/articles/kb4bO