CustomTex: Çok Referanslı Özelleştirme ile Yüksek Sadakatli İç Mekan Sahne Tekstürizasyonu

Giriş

3D sahne oluşturma ve tekstürizasyon, mimari görselleştirme, sanal gerçeklik ve film prodüksiyonu gibi alanlarda kritik bir rol oynar. Ancak mevcut yöntemlerde karşılaşılan temel sorunlardan biri, dokuların aydınlatma ve malzeme özellikleriyle iç içe geçmiş ("baked-in") yapıda olmasıdır. Bu durum, sahnelerin farklı ışık koşullarında yeniden render edilmesini veya malzeme özelliklerinin bağımsız olarak düzenlenmesini zorlaştırır. Chen ve arkadaşları tarafından sunulan "CustomTex: High-fidelity Indoor Scene Texturing via Multi-Reference Customization" çalışması, bu sorunu çözmeye yönelik yenilikçi bir çerçeve önermektedir.

Mevcut metin güdümlü (text-driven) difüzyon modelleri, kullanıcıların metin komutlarıyla dokular üretmesine olanak tanısa da, bu yaklaşım ince detaylar için yetersiz kalmaktadır. Örneğin "kadife kanepe" ifadesi, kumaşın özgül dokusunu, iplik yoğunluğunu veya parlaklık dağılımını tam olarak tanımlayamaz. Ayrıca bu yöntemler genellikle bulanık, yapay bozulmalar içeren (artifacts) ve gömülü gölgeler taşıyan çıktılar üretir. CustomTex, çoklu referans görüntüleri kullanarak örnek seviyesinde (instance-level) hassas kontrol sağlayan ve çift damıtma (dual-distillation) stratejisi ile yüksek sadakatli dokular üreten bir framework sunar.

Teknik Mimari ve Çift Damıtma Stratejisi

CustomTex'in temelini oluşturan çift damıtma yaklaşımı, semantik kontrol ile piksel seviyesi iyileştirmeyi etkili bir şekilde ayırır. Bu ayrım, difüzyon modellerinin doğasından kaynaklanan temel bir gerilimi çözer.