Gambar AI diri Anda dalam WAKTU KURANG DARI 10 detik Mirip dengan InstantID (tetapi FLUX) PuLID: Kustomisasi ID Murni dan Kilat melalui Penyelarasan Kontrasif

Perkenalan

PuLID adalah metode kustomisasi ID inovatif tanpa penyetelan yang dirancang untuk pembuatan teks ke gambar. Dengan menggabungkan cabang Lightning T2I di samping cabang difusi standar, PuLID memperkenalkan kehilangan penyelarasan kontrastif dan kehilangan ID yang akurat, meminimalkan gangguan pada model asli dan memastikan kesetiaan ID yang tinggi. Eksperimen menunjukkan bahwa PuLID mencapai kinerja yang unggul baik dalam kesetiaan ID maupun kemampuan edit. Selain itu, fitur penting PuLID adalah bahwa elemen gambar (misalnya, latar belakang, pencahayaan, komposisi, dan gaya) tetap sekonsisten mungkin sebelum dan setelah penyisipan ID.

Mencoba PuLID untuk FLUX Bebas

Apa yang terjadi di twitter tentang Pulid Flux？

Metode

  • Penyelarasan Kontras: Melalui hilangnya penyelarasan kontrastif dan hilangnya ID, PuLID menyisipkan informasi ID tanpa memengaruhi perilaku model asli.
  • Cabang Lightning T2I: Memperkenalkan cabang Lightning T2I yang menggunakan teknik pengambilan sampel cepat untuk menghasilkan gambar berkualitas tinggi dari noise murni.
  • Mengoptimalkan Kehilangan ID: Mengoptimalkan kehilangan ID dalam pengaturan yang lebih akurat untuk meningkatkan kesamaan ID.

Percobaan

  • Perbandingan Kuantitatif: Mengevaluasi kesetiaan ID menggunakan kesamaan kosinus ID, memperlihatkan bahwa PuLID mengungguli metode yang ada di seluruh set pengujian dan model dasar.
  • Perbandingan Kualitatif: PuLID mencapai kesamaan ID yang tinggi sekaligus menyebabkan lebih sedikit gangguan pada model asli, secara akurat mereproduksi pencahayaan, gaya, dan tata letak model asli.

Kontribusi

  1. Mengusulkan metode bebas penyetelan, PuLID, yang mempertahankan kesamaan ID yang tinggi sambil mengurangi dampak pada perilaku model asli.
  2. Memperkenalkan cabang Lightning T2I bersama dengan cabang difusi reguler, yang menggabungkan kehilangan penyelarasan kontrastif dan kehilangan ID untuk meminimalkan kontaminasi informasi ID pada model asli sekaligus memastikan kesetiaan.
  3. Eksperimen menunjukkan bahwa PuLID mencapai kinerja canggih dalam hal kesetiaan ID dan kemampuan sunting serta kurang invasif terhadap model, membuatnya lebih fleksibel untuk aplikasi praktis.

Tanya Jawab Umum

PuLID adalah metode penyesuaian ID bebas penyetelan untuk pembuatan teks ke gambar yang memastikan kesetiaan ID yang tinggi dan gangguan minimal pada model asli.

PuLID menggunakan kehilangan penyelarasan kontrastif dan kehilangan ID akurat untuk mempertahankan fidelitas ID yang tinggi sambil meminimalkan dampak pada perilaku model asli.

Cabang Lightning T2I adalah komponen PuLID yang memanfaatkan teknik pengambilan sampel cepat untuk menghasilkan gambar berkualitas tinggi dari noise murni.

PuLID menawarkan kesetiaan dan kemampuan sunting ID yang unggul, dengan lebih sedikit gangguan pada model asli, sehingga membuatnya fleksibel untuk berbagai aplikasi.

PuLID mengungguli metode yang ada dalam kesetiaan ID dan kemampuan sunting, seperti yang dibuktikan oleh perbandingan kuantitatif dan kualitatif.

Ya, pendekatan PuLID kurang invasif terhadap model, membuatnya sangat cocok untuk aplikasi praktis.

Kode dan model untuk PuLID akan tersedia di Bahasa Indonesia: GitHub.