You cannot select more than 25 topics Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.

902 B

colemano

un modulo scritto coi piedi

Video/Image Recognition applicato all'interpretazione della lingua dei segni

Sono utilizzate delle reti neurali (link-wiki-NN) per il riconoscimento (preparazione ed allenamento in train/ASL). Le reti utilizzate sfruttano il transfer-learning (link-wiki-transfer-learning) per adesso è considerata solo la ASL (American Sign Language) perchè i dataset ed un bel po di script erano già pronti.

L'idea è di traslare il tutto anche con la LIS.

le due principali funzionalità sono:

  • data un immagine o video predirre con i modelli allenati il segno e la parola associata.
  • data una parola fornire un esempio grafico/fotografico/video del segno associato

usage

per lanciare la demo con flask lancia il seguente script:

python flask/app.py

cerca di avere uno sfondo uniforme durante la ripresa.

apri il browser e vai su http://127.0.0.1:5000/