Bir kişiyi kesmek + bir moda imajının temiz bir şekilde kesilmesi, 2026'da çözülmemiş bir problem değildir. Genric segmentasyon modelleri, AI tarafından üretilen görüntülerde fotoğraflar ve kötü şeyler üzerinde yeterince iyi yapar, kenarlar ve gölgeler tamamen farklı davranır. İşte LLM tarafından üretilen arka planlardan gelen Apiway segmentleri saf beyaz boru hattı için nasıl.
Segmentasyon AI görüntülerinde neden daha zor
Gerçek fotoğraflar öngörülebilir kenar özellikleri vardır: yüksek-kontrast sınırlarında kormatik aberrasyon, tekil bölgelerde sensör gürültü, derinlik-ömürü düşüş. Genric segmentasyon modelleri fotoğraf verileri üzerinde tren yapar ve bu sinyalleri sınır cue'nin bir parçası olarak öğrenir.
AI-prodüklenmiş görüntüler farklı sinyalleri vardır. Edges daha temiz, gürültü üniforma, derinlik alanı fiziksel yerine yaklaşık olarak. Genric segmentasyon modelleri genellikle AI görüntülerinde sınırları özletir - bir ceket uff klip aldı, bir saç iplik parçalandı, bir çanta arka plana kaybolur.
Üç katmanlı decomposition
Apiway'in segmentasyon geçişi, her zamanki iki değil, görüntüde üç maske üretiyor:
- Foreground: Model ve kıyafet. alfa kenarlarıyla sert maske.
- Cast gölge: Ayakların altında ve modelin arkasında yumuşak gölge. Yumuşak maske, düşük opaklık.
- Arka plan arka plan arka plan arka plan arka plan arka plan arka plan: Her şey başka. Yeniden yer sahnesinden silindi.
Dağ ayrı bir tabaka olarak gölge en önemli mimari karardır. (Daha fazla: Neden saf beyazlara yeniden yer veriyoruz.) Bu olmadan, modeller uzayda yüz yüzen gibi görünüyor.
Edge vakaları model için eğitilmiştir
Genric segmentasyon bu konuda başarısız olur; Apiway'in moda özel eğitimi onları yakalar.
- Arka arka plana karşı güzel saçlar - alfa sert poligon kestiğinden ziyade çiftleşiyor.
- Arka planın kısmen göstereceği kısmen yaşayan Sheer veya kısmen-transbeveybe kumaşlar.
- Arka plandaki piksel genişliğine ince olan uzun mücevher zincirleri.
- Bag askhouette'i ve kemerleri bağlayan.
- Cam ve yansıtıcı aksesuarlar (suncamlar, kristalleri izlemek).
- Loose drapey kumaşı sınırın gerçekten belirsiz olduğu yerde.
Alfa, sınırda çiftleşiyor
Sert kesmeler kompozit görünüyor. Boru hattı, tam olarak veya dışarıda olduğundan, pikselin kısmen şeffaf olmasına izin veren ön planda bir alfa-matting geçişi çalışır. Bu, saçların sert bir poligon kenarını terk etmek yerine beyaz arka plana çıkmasına izin veriyor.
Alfa geçişi orijinal LLM çıkışına karşı kalibre edilir: orijinalin yumuşak, fındık kenarları varsa (örneğin.g. Arka bir atış, matting o yumuşaklığı daha koruyor. Eğer orijinalin crisp kenarları varsa (e.g. Stüdyo aydınlatması, matting sıkı kalır.
Neden gölge koruma özellikle önemli
Gölgeler insan görsel sistemi için en önemli sinyaldir. Modelin ayakları altında hiçbir temas gölgesi olmadığı bir moda görüntüsü anında kompozit olarak okunur - bilinçli gözten daha hızlı neden sanata uğrayabilir. 20 opaklık demirlerinde bile küçük bir yumuşak gölge bile, modelin zemine kadar fotoğrafını çeker ve çıktının kollaged yerine fotoğraflandığını yapar.
Amazon-politika uyum özellikle de, yumuşak gölgeler açıkça izin verilir ( kural “beyaz arka plan” değildir, “ürün altında gölge yok”). Gölge, yüzen model sanatını ortadan kaldırırken politika zarfı içinde kalır.
Performans şekli
Segmentasyon posta işlem hattının bir parçası olarak çalışır. Üretim GPU'ları üzerinde görüntü için yaklaşık 0,5-1.0 saniye. Maliyet per-shot kredi fiyatına absorbe edilir; ayrı bir çizgi öğe yoktur.
Neden bunu üçüncü taraf API'si aramaktan ziyade inşa ettik
Off-the-shelf segmentasyon APIsleri fotoğraf ve tüketici kullanımı vakaları için ayarlanır. Genellikle moda özel kenar vakalarını kaçırıyorlar (jewelry zincirleri, oer kumaş, gölgeler). Ayrıca çağrıda sorumlular, bu da per-shot maliyetini bir şekilde bir araya getirecekti ki, bir kredi-eşit fiyat modelini kıracaklardı.
Modaya özgü veriler üzerinde eğitilmiş özel bir model, arama başına daha iyi bir çıktı ve sıfır marjinal maliyet sunar. Mühendislik yatırımı ilk üretim çeyreği içinde geri ödedi.
Segmentasyon sonucu kendiniz görün
Herhangi bir Beyaz Stüdyo görüntüsü. Çıktı, post-segmentasyon sonucu - temel konu ve saf beyaz bir tuval üzerinde gölge at. 150 bir zaman kredili ücretsiz hesap gemisi - gerçek kıyafetler ve kenar davaları hakkında test etmek için yeterli.