Retirer des objets sans redécorer
L'approche naïve consiste à demander à un modèle de retirer l'encombrement et d'espérer. Ce qui revient est une pièce réimaginée : similaire, plausible, et non la propriété que vous avez photographiée.
Ici, la suppression est donc pilotée par masque. Chaque objet est segmenté, les zones sont combinées et légèrement agrandies, et un modèle d'inpainting reconstruit uniquement ce qui se trouvait derrière eux. Tout ce qui se trouve en dehors de cette zone n'est pas touché par la construction, et nous le vérifions, en mesurant spécifiquement la structure et la couleur en dehors de la zone effacée. Un rendu qui a repeint un mur en retirant un mug échoue à cette vérification.
Pourquoi le masque est agrandi avant l'effacement
Une limite de segmentation se place au plus près de l'objet, ce qui laisse son ombre de contact, son reflet sur un sol poli et un liseré de débordement de couleur juste en dehors du masque. Effacez sans agrandir la zone et vous retirez l'objet mais conservez son ombre : un artefact distinctif, et évident.
La limite que nous ne franchirons pas
L'encombrement, c'est un panier à linge, un chargeur de téléphone, une pile de courrier. Un défaut, c'est de l'humidité, une fissure, de la peinture écaillée, une tache. Retirer le premier relève du rangement ; retirer le second revient à dissimuler un défaut, ce que plusieurs marchés interdisent purement et simplement et qu'aucune divulgation ne résout. Cet outil est conçu pour le premier.