Proses penerjemahan komik Jepang secara manual memakan waktu dan tenaga karena harus mendeteksi, membersihkan, dan menulis ulang elemen teks secara visual. Penelitian ini bertujuan mengatasi permasalahan tersebut dengan membangun sistem otomatis yang menggunakan YOLOv11 untuk mendeteksi dan mengklasifikasikan lima jenis balon ucapan serta menyegmentasi teks onomatope. Area teks yang terdeteksi dibersihkan dengan LaMa Inpainting, lalu hasil terjemahan ditulis ulang ke dalam gambar dengan font sesuai jenis balon. Hasil pengujian menunjukkan performa tinggi dalam deteksi balon ucapan (mAP50-95: 80,17%), namun segmentasi onomatope masih perlu ditingkatkan (mAP50-95: 31,6%). Evaluasi pengguna menunjukkan bahwa hasil akhir secara visual layak dan terbaca dengan baik.