Bahasa isyarat merupakan bentuk komunikasi visual yang penting bagi penyandang disabilitas rungu wicara. Namun, masih banyak masyarakat umum yang belum memahami bahasa isyarat, khususnya Sistem Isyarat Bahasa Indonesia (SIBI).
Penelitian ini bertujuan untuk mengembangkan sistem pengenalan huruf bahasa isyarat SIBI berbasis citra menggunakan algoritma You Only Look Once (YOLO). Data citra huruf dikumpulkan secara primer dari tangan penulis, kemudian dilakukan proses anotasi, pelatihan model deteksi objek menggunakan YOLOv11, serta pengujian dengan data uji yang berbeda. Hasil deteksi huruf disusun menjadi kalimat sederhana menggunakan pendekatan pengolahan sekuens huruf dan diimplementasikan dengan bantuan OpenCV. Model terbaik diperoleh pada epoch ke-100 dengan nilai precision sebesar 0,958, recall 0,911, mAP@50 sebesar 0,984, dan mAP@50–95 sebesar 0,801. Pengujian pada pengenalan huruf menunjukkan nilai akurasi rata-rata 0,831 dan F1-score sebesar 0,865. Hasil tersebut menunjukkan bahwa sistem mampu mengenali huruf isyarat SIBI cukup baik dan menyusunnya menjadi kalimat. Sistem ini diharapkan dapat menjadi solusi praktis untuk menjembatani komunikasi antara penyandang disabilitas rungu wicara dan masyarakat umum dalam bentuk teks.

Kata kunci : Bahasa Isyarat, SIBI, YOLO, Deteksi Huruf, Pengenalan Citra