IMPLEMENTASI FINE-TUNING DREAMBOOTH DAN REGULARISASI DROPOUT UNTUK GENERASI KARAKTER FANTASI BERGAYA ART NOUVEAU
DOI:
https://doi.org/10.70248/jrsit.v2i3.1841Keywords:
Stable Diffusion, DreamBooth Fine-Tuning, Dropout Regularization, Art Nouveau, Text-to-Image GenerationAbstract
Penelitian ini bertujuan untuk menghasilkan visualisasi karakter fantasi bergaya Art Nouveau melalui fine-tuning model Stable Diffusion menggunakan metode DreamBooth. Proses penelitian mencakup pengumpulan dataset karakter bergaya Art Nouveau, pelatihan model menggunakan Stable Diffusion v1.5, pengembangan sistem berbasis web dengan Streamlit, serta evaluasi hasil menggunakan CLIP Score dan analisis kualitatif. Fine-tuning dilakukan dengan metode DreamBooth untuk meningkatkan fidelitas visual dan personalisasi karakter berdasarkan deskripsi teks. Data pelatihan diolah melalui CLIP Text Encoder untuk menghasilkan embedding yang merepresentasikan teks, sedangkan model dilatih secara iteratif dengan loss calculation berbasis mean squared error (MSE) dan dropout regularization untuk mencegah overfitting. Evaluasi menunjukkan bahwa penggunaan prompt yang lebih spesifik serta negative prompt dapat meningkatkan CLIP Score rata-rata dari 0.65 menjadi 0.826 setelah fine-tuning, yang mencerminkan peningkatan akurasi visualisasi terhadap deskripsi teks. Aplikasi berbasis web dikembangkan untuk memudahkan pengguna dalam menghasilkan gambar dari teks secara real-time. Implementasi sistem ini memungkinkan eksplorasi visual karakter secara interaktif, dengan fitur validasi berbasis CLIP Score dan evaluasi estetika. Hasil penelitian menunjukkan bahwa model yang telah difine-tune mampu menghasilkan gambar dengan elemen khas Art Nouveau, seperti motif dekoratif, garis melengkung, dan palet warna pastel. Dengan demikian, penelitian ini memberikan kontribusi dalam pengembangan sistem generatif berbasis AI untuk industri kreatif, khususnya dalam visualisasi karakter fantasi yang estetis dan naratif. Kata Kunci: Stable Diffusion, DreamBooth, Art Nouveau, Fine-TuningReferences
Baldi, J. R. T., Y. Yohannes, and ... 2023. “Penggunaan Convolutional Neural Network Sebagai Pengenalan Huruf Bahasa Ibrani.” Jutisi: Jurnal Ilmiah ….
Farwati, Maryani, Irenda Talitha Salsabila, Kholifah Raihanun Navira, Tata Sutabri, and Universitas Bina Darma Palembang. 2023. “Analisa Pengaruh Teknologi Artificial Intelligence (AI) Dalam Kehidupan Sehari-Hari [Analyze the Influence of Artificial Intelligence (AI) Technology in Daily Life].” Jurnal Sistem Informatika Dan Menejemen 11(1):41–42.
Harahap, Fahri Aulia Alfarisi, Ronaldo Mardianson Sinaga, Khusnul Arifin, and Kana Saputra S. 2022. “Implementasi Algoritma Convolutional Neural Network Untuk Mendeteksi Penyakit Ginjal Implementation of Convolutional Neural Network for Detecting Kidney Disease.” Teknologi Informasi, Komputer Dan Aplikasinya (JTIKA) 4(2):212–19.
Hendrawati, Theresia, Dewa Ayu Putri Wulandari, and Ni Luh Wiwik Sri Rahayu Ginantra. 2024. “Penerapan Metode Stable Diffusion Dengan Fine Tuning Untuk Pola Endek Bali.” Jurnal Teknologi Informasi Komunikasi (e-Journal) 10:8–10.
Pongtambing, Yulita Sirinti, Felycitae Ekalaya Appa, A. Muh. Amil Siddik, Eliyah A. M. Sampetoding, Harsi Admawati, Arini Anestesia Purba, Arnold Sau, and Esther S. Manapa. 2023. “Peluang Dan Tantangan Kecerdasan Buatan Bagi Generasi Muda.” Bakti Sekawan : Jurnal Pengabdian Masyarakat 3(1):23–28. doi: 10.35746/bakwan.v3i1.362.
Puspita, Kharisma Galuh. 2023. “Analisis Kestabilanmodel Matematika Penyebaran Penyakit Demam Berdarah Dengue Dengan Pengaruh Treatmentdan Fogging.” MATHunesa Jurnal IlmiahMatematika 11(03):318–27.
Baldi, J. R. T., Y. Yohannes, and ... 2023. “Penggunaan Convolutional Neural Network Sebagai Pengenalan Huruf Bahasa Ibrani.” Jutisi: Jurnal Ilmiah ….
Farwati, Maryani, Irenda Talitha Salsabila, Kholifah Raihanun Navira, Tata Sutabri, and Universitas Bina Darma Palembang. 2023. “Analisa Pengaruh Teknologi Artificial Intelligence (AI) Dalam Kehidupan Sehari-Hari [Analyze the Influence of Artificial Intelligence (AI) Technology in Daily Life].” Jurnal Sistem Informatika Dan Menejemen 11(1):41–42.
Harahap, Fahri Aulia Alfarisi, Ronaldo Mardianson Sinaga, Khusnul Arifin, and Kana Saputra S. 2022. “Implementasi Algoritma Convolutional Neural Network Untuk Mendeteksi Penyakit Ginjal Implementation of Convolutional Neural Network for Detecting Kidney Disease.” Teknologi Informasi, Komputer Dan Aplikasinya (JTIKA) 4(2):212–19.
Hendrawati, Theresia, Dewa Ayu Putri Wulandari, and Ni Luh Wiwik Sri Rahayu Ginantra. 2024. “Penerapan Metode Stable Diffusion Dengan Fine Tuning Untuk Pola Endek Bali.” Jurnal Teknologi Informasi Komunikasi (e-Journal) 10:8–10.
Pongtambing, Yulita Sirinti, Felycitae Ekalaya Appa, A. Muh. Amil Siddik, Eliyah A. M. Sampetoding, Harsi Admawati, Arini Anestesia Purba, Arnold Sau, and Esther S. Manapa. 2023. “Peluang Dan Tantangan Kecerdasan Buatan Bagi Generasi Muda.” Bakti Sekawan : Jurnal Pengabdian Masyarakat 3(1):23–28. doi: 10.35746/bakwan.v3i1.362.
Puspita, Kharisma Galuh. 2023. “Analisis Kestabilanmodel Matematika Penyebaran Penyakit Demam Berdarah Dengue Dengan Pengaruh Treatmentdan Fogging.” MATHunesa Jurnal IlmiahMatematika 11(03):318–27.
