Augmented Learning untuk Pembelajaran Anatomi Wajah Berbasis Computer Vision Interaktif

DOI: https://doi.org/10.33650/coreai.v6i2.13207

Authors (s)


(1) * Surya Prihanto   (Universitas Lampung)  
        Indonesia
(2)  Yusril Al Fath   (Universitas Lampung)
(3)  Satrio Satrio   (Universitas Lampung)
(4)  Muhammad Rifqi Naufal   (Universitas Lampung)
(*) Corresponding Author

Abstract


Perkembangan teknologi Computer Vision memungkinkan terciptanya media pembelajaran interaktif yang membantu siswa memahami anatomi wajah secara visual dan praktis melalui interaksi dengan model digital. Penelitian ini bertujuan untuk mengembangkan media pembelajaran anatomi wajah interaktif berbasis Computer Vision dengan integrasi MediaPipe Face Mesh dan Hand Tracking. Sistem dirancang untuk meningkatkan pemahaman konsep anatomi melalui interaksi visual, auditori, dan kinestetik. Metode yang digunakan adalah Research and Development (R&D) dengan tahapan analisis kebutuhan, perancangan sistem, pengembangan, dan uji coba. Aplikasi memiliki dua fitur utama, yaitu fitur praktikum (Edu-Touch, 3D Board, dan Game Anatomi) serta fitur materi (kuis, buku digital, dan video learning). Hasil pengujian menunjukkan bahwa sistem mampu mendeteksi 468 titik landmark wajah dan 21 titik landmark tangan secara real-time dengan akurasi tinggi. Fitur Edu-Touch berhasil menampilkan animasi 3D dan suara penjelasan saat titik wajah disentuh. Fitur 3D Board mengenali pertemuan landmark jari telunjuk (titik 8) dan ibu jari (titik 4) untuk mengontrol rotasi model 3D, sedangkan Game Anatomi berhasil mendeteksi ekspresi wajah sebagai respons terhadap soal. Hasil ini menunjukkan bahwa integrasi MediaPipe efektif dalam menciptakan pembelajaran yang interaktif, menarik, dan adaptif terhadap berbagai gaya belajar

Keywords

Computer Vision; Mediapipe; Face Mesh; Hand Tracking; Media-pipe;



Full Text: DOWNLOAD PDF



References


P. Allaka and L. Awopetu, “Exploring the effects of technological innovations on elevating student learning, engagement, and workforce readiness in higher education business programs,” Journal of Education for Business, vol. 100, no. 4, pp. 181–191, May 2025, doi: 10.1080/08832323.2025.2492019.

N. M. Hassan, “The Role of Technology in Modern Education: A Comparative Analysis of Benefits and Challenges,” International Journal of Science and Research (IJSR), vol. 13, no. 11, pp. 460–463, Nov. 2024, doi: 10.21275/SR241029140949.

A. Uzorka and O. A. Odebiyi, “Impact of Digital Learning Tools on Student Engagement and Achievement,” JOURNAL OF DIGITAL LEARNING AND DISTANCE EDUCATION, vol. 4, no. 1, pp. 1436–1445, Jun. 2025, doi: 10.56778/jdlde.v4i1.511.

D. Kurniawan, A. Husna, M. P. F. Nurlela, and M. N. Zulfahmi, “Analisis Pengalaman Belajar Siswa Melalui Penerapan Pendekatan Pembelajaran Aktif, Inovatif, Kreatif, Dan Menyenangkan,” Jurnal Pengajaran Sekolah Dasar, vol. 3, no. 1, pp. 27–35, Jun. 2024, doi: 10.56855/jpsd.v3i1.893.

G. P. Nainggolan, M. Purba, N. Aulia, Y. Sitanggang, and R. Yuni, “Persepsi Siswa terhadap Penggunaan Media Pembelajaran Video Animasi dalam Proses Pembelajaran di SMAN 18 Medan,” JOURNAL SAINS STUDENT RESEARCH, vol. 3, no. 3, pp. 571–578, May 2025, doi: 10.61722/jssr.v3i3.4836.

M. Taşkın, “Artificial Intelligence in Personalized Education: Enhancing Learning Outcomes Through Adaptive Technologies and Data-Driven Insights,” Human Computer Interaction, vol. 8, no. 1, pp. 173–173, 2024, doi: 10.62802/ygye0506.

A. S. Akintola, “Adaptive AI Systems in Education: Real-Time Personalised Learning Pathways for Skill Development,” in 4th International Conference on AI ML, Data Science and Robotics, United Research Forum, Nov. 2024, pp. 3–3. doi: 10.51219/URForum.2024.Akinyemi-Sadeeq-Akintola.

M. Pujowati, T. Suwarningsih, and E. O. Manalu, “Analisis Pemanfaatan AI-Based Learning Games dalam Meningkatkan Kreativitas dan Keterlibatan Siswa pada Pembelajaran Tematik di MTs DDI Entrop Kota Jayapura,” Jurnal Ekonomi, Pendidikan dan Perencanaan Pembangunan Daerah, vol. 2, no. 2, pp. 1–5, Dec. 2024.

B. E. Sasongko, I. L. Harahap, and L. Herlina, “VIRTUAL REALITY: SEBUAH MODALITAS PELENGKAP EDUKASI ANATOMI,” Jurnal Midwifery Update (MU), vol. 5, no. 2, pp. 41–48, Oct. 2023, doi: 10.32807/jmu.v5i2.146.

A. K. Abdulsahib, R. Mohammed, A. L. Ahmed, and M. M. Jaber, “Artificial Intelligence based Computer Vision Analysis for Smart Education Interactive Visualization,” Fusion: Practice and Applications, no. Issue 2, pp. 245–260, Jan. 2024, doi: 10.54216/FPA.150221.

K. Oqaidi, S. Aouhassi, and K. Mansouri, “How Does Computer Vision Reshape Higher Education? A Comprehensive Review,” Journal of Engineering Education Transformations, pp. 180–194, Apr. 2025, doi: 10.16920/jeet/2024/v38i4/25106.

Y. Hu, Q. Li, and S. Hsu, “Interactive visual computer vision analysis based on artificial intelligence technology in intelligent education,” Neural Comput & Applic, vol. 34, no. 12, pp. 9315–9333, Jun. 2022, doi: 10.1007/s00521-021-06285-z.

Sketchfab, “3D Model Repository for Face Anatomy Visualization,” Sketchfab, Accessed: Sep. 11, 2025. [Online]. Available: https://sketchfab.com/feed

S. Sugeng and T. N. Nizar, “Deteksi Aktivitas Mata, Mulut Dan Kemiringan Kepala Sebagai Fitur Untuk Deteksi Kantuk Pada Pengendara Mobil,” Komputika, vol. 12, no. 1, pp. 83–91, May 2023, doi: 10.34010/komputika.v12i1.9688.

Amanda Muchsin Chalik, Bilal Abdul Qowy, Faiz Hanafi, and Ahlijati Nuraminah, “Mouse Tracking Tangan dengan Klasifikasi Gestur Menggunakan OpenCV dan Mediapipe,” JUITIK, vol. 1, no. 2, pp. 10–18, Jul. 2021, doi: 10.55606/juitik.v1i2.323.


Dimensions, PlumX, and Google Scholar Metrics

10.33650/coreai.v6i2.13207


Refbacks

  • There are currently no refbacks.


Copyright (c) 2025 Surya Prihanto

Creative Commons License
This work is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.


Creative Commons License
 
This work is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.

COREAI: Jurnal Kecerdasan Buatan, Komputasi dan Teknologi Informasi

Published by Technic Faculty of Nurul Jadid University, Probolinggo, East Java, Indonesia.