Kamera depan smartphone pada saat ini banyak digunakan oleh pengguna untuk selfie, video call, dan teleconference. Penelitian ini memanfaatkan kamera depan smartphone untuk melakukan proses deteksi gerakan pupil mata pengguna. Proses deteksi gerakan pupil mata selama ini banyak diimplementasikan menggunakan perangkat keras atau berbasis desktop dan website. Untuk melakukan implementasi Machine Learning pada perangkat smartphone. Oleh karena itu penelitian ini menggunakan library ML Kit untuk mendukung implementasi Machine Learning pada perangkat smartphone. Selain itu penelitian ini menggunakan Convolutional Neural Network (CNN) yang merupakan salah satu arsitektur dari Deep Learning untuk mendapatkan tingkat keberhasilan deteksi gerakan pupil mata yang tinggi. Proses traning model memperoleh nilai AP50(IoU 0.50) sebesar 89%. IoU digunakan untuk mengukur akurasi bounding box pada deteksi. Pada pengujian menggunakan confusion matrix menghasilkan nilai rata-rata akurasi pada setiap kelas sebesar 68,8%. Pengujian pada pengguna menggunakan jarak dan resolusi kamera sebagai parameter dengan jarak 15 cm, 20 cm, dan 25 cm yang memiliki masing-masing rata-rata akurasi sebesar 71%, 60%, dan 51%. Penelitian ini mampu menghasilkan aplikasi yang dapat mendeteksi posisi pupil mata.