This repository contains documentation of our Capstone Project Bangkit 2021. Our project called Eduwash, which is an android application. We build this app in terms to educate children to washing hand correctly based on WHO standard. Our app is containing two features, excercise and practice. In the exercise feature there is a gif along with a handwash motion guideline that shows the correct hand washing steps from steps 1 until 7. Meanwhile, in practice feature the app will be asses the user's handwashing movement whether correct or not. The mechanism is the app will be activate mobile camera and utilize it as input that will be feeded to machine learning. Thus, our machine learning model will be classify the handwash motions.
We were using video contains WHO recomendation handwash movements as our dataset.
This is an example of dataset that we were utilize as our training model. Each frame on video were extracted into numpy array and labeled, then training process obtained.
Dataset source Handwash Dataset
Extracted dataset Features Extraction
Label Labels Extraction
Example video to asses model Data Test
Result of test model using data/video test Hasil Predict
Repo ini berisikan Capstone Project Bangkit 2021 yakni tentang Hand wash edu berupa Aplikasi Android. Hand wash edu, merupakan aplikasi android yang digunakan untuk mengedukasi anak-anak dalam mencuci tangan secara benar menurut standar WHO dengan cara memberikan informasi dan fakta menarik tentang mencuci tangan. Selain itu dalam aplikasi ini juga terdapat exercise untuk mendeteksi apakah mereka telah mempraktikan nya dengan benar atau tidak. Dengan cara aplikasi akan mendeteksi gerakan tangan mereka melalui kamera hp, lalu oleh Machine Learning akan dideteksi termasuk langkah-langkah yang dianjurkan ataukan tidak.
Dataset yang digunakan dalam pelatihan Machine Learning tersebut berupa video dari masing masing langkah yang mempresentasikan langkah yang benar dan dianjurkan oleh WHO.
Berikut adalah contoh dataset yang digunakan untuk melakukan training model, setiap frame pada video tersebut di ekstrak kedalam numpy array dan diberikan label. Setelah itu dilakukan training.
Dataset yang digunakan Handwash Dataset
Dataset yang sudah di lakukan ekstraksi Features Extraction
Label Labels Extraction
Video example yang digunakan untuk menguji model Data Test
Hasil uji model menggunakan data/video test Hasil Predict