Klasifikasi jenis kelamin yaitu suatu proses mengklasifikasikan jenis kelamin seseorang melalui citra digital berdasarkan fitur citra pelatihan yang telah disimpan. Objek yang dijadikan acuan adalah busana yang dikenakan di area wajah. Universitas Nurul Jadid adalah universitas yang berada dibawah naungan Pondok Pesantren Nurul Jadid tentu dalam mengatur pergaulan mahasiswa menggunakan aturan yang berlandaskan kepesantrenan. Mahasiswa dilarang melakukan pertemuan dengan mahasiswi di area kampus. Akan tetapi, masih banyak mahasiswa dan mahasiswi yang melanggar aturan tersebut. Oleh karena itu, dibutuhkan suatu metode yang dapat mengklasifikasi jenis kelamin mahasiswa berdasarkan busana pada area wajah secara otomatis. Penelitian ini menggunakan dua metode yaitu metode haar cascade dan deep learning. Metode haar cascade digunakan untuk menentukan titik area wajah dan metode deep learning digunakan untuk mengklasifikasikan citra. Metode diimplementasikan ke source code dengan software python. Dapat disimpulkan bahwa metode haar cascade tergolog baik dalam menentukan titik area wajah. Dan deep learning dapat mengklasifikasikan gambar dengan baik apabila terdapat kesamaan komposisi warna pada data testing dan data training.