Libras é um simples reconhecimento de gestos de mão baseado em IA que traduz uma pose de mão no alfabeto sendo adaptado de (ASL) para libras. Usando o Tensorflow JS e seu modelo pré-carregado Handpose para detectar o objeto de mão e suas partes. A Handsign também usa uma biblioteca adicional chamada Fingerpose para classificar alguns dos gestos de mão personalizados com base na posição do dedo.
#dohackathon #madewithTFJS
- Clone o repositório
git clone https://github.com/hsouzaeduardo/libras.git- Start the project
# move to the project folder and install all dependencies
cd libras
yarn install- Run the project on your local machine
# run Gatsby
yarn develop- The project is live 🚀
Seu projeto vai rodar neste endereço: http://localhost:8000
Caso queira editar todo app está em: src/pages/app.js
-
Tensorflow JS - A Library for ML in JS.
-
Handpose - Um pipeline de ML leve que consiste em dois modelos: um detector de palma e um modelo de rastreamento de mão-esqueleto de dedo.
-
Fingerpose - Um classificador de pose para pontos de referência manuais detectados pelo modelo do TensorFlow.js Handpose.
Se você quiser saber mais sobre Tensorflow JS e gesto de mão personalizado, por favor, confira estes vídeos incríveis