タグ: #SigLIP
Kubernetes・DevOps・MLOps を自分で動かして測った値で書くブログ · 1 件
対照学習とCLIP:画像とテキストをペアで学習すれば、見たことのないものも当てられる
人が付けた分類ラベルなしで、インターネット上の画像とテキストのペア4億個だけで学習したCLIPが、どのように見たことのない分類問題を解くのかを解説します。バッチ内のN×N類似度行列にかけるInfoNCE損失、温度τの役割、プロンプトで分類器を作る方法をイラストと数式で紐解き、numpyで損失を直接計算した後、20個の概念からなるおもちゃの世界で「見たことのない概念」を当ててみます。SigLIPのシグモイド損失とCLIPの限界(個数、細か
2026-10-17 · 14 分で読めます #비전 모델#CLIP#대조 학습#InfoNCE#SigLIP