Makale, el yapımı veri artırmalarına (data augmentation) başvurmadan yüksek düzeyde anlamsal görüntü temsilleri öğrenmek için tasarlanmış yeni bir öz-denetimli öğrenme çerçevesi olan Görüntü Tabanlı Birleştirilmiş Gömülü Yordayıcı Mimarisi’ni (I-JEPA) tanıtıyor. Bilgisayar görüsündeki geleneksel öz-denetimli yöntemler genellikle iki kategoriye ayrılır: Görüntünün artırılmış versiyonlarını kullanarak tutarlı gömmeler (embeddings) elde etmeyi hedefleyen değişmezlik tabanlı yaklaşımlar ve eksik pikselleri yeniden inşa eden Maskeli Otomatik Kodlayıcılar (MAE) gibi üreteci yöntemler. Değişmezlik tabanlı yöntemler, farklı soyutlama düzeyleri veya diğer modaliteler gerektiren görevlerde performansı düşürebilecek güçlü önyargılara yol açarken, üreteci…

Konular: Bilgisayarlı Görü, Özdenetimli Öğrenme ve Derin Öğrenme Mimarileri

SiteM’de tam özet, flashcard ve quiz →

Orijinal kaynak: arxiv.org

Kaynak: sitem.co — paylas.io yer imi / keşif katmanı.