Skip to content

MediaPipe를 이용한 수어인식 프로그램(도커를 통해 배포)

Notifications You must be signed in to change notification settings

Jeong-AYeong/Sign-Language-Project

Repository files navigation

Sign-Language-Project-Translation-Learning-

미디어파이프를 이용하여 파이썬으로 웹캠을 통해 수화를 인식하게 하는 것 만들어서 깃허브에 올리기

  • 도커를 이용하여 연결시키기?

미디어파이프 기본예제 코드를 레포지토리에 복제하여 올림

손을 인식하게끔 하는 방법 = 미디어파이프를 이용하여 수화 인식하게 하는 학습 데이터셋을 구축할 방법 만들기

-> 이때 티쳐블 머신 사용도 고려해볼것 - X 인식 과정 실패

(미디어파이프에서 수화동작을 인식시키면 각 벡터값과 그 동작의 mean이 저장됨) 이때 영상데이터로 학습시킬것인지 직접 하나씩 데이터를 학습시킬것인지 정해야함. -> 영상 데이터를 기반으로 직접 동작으로 웹캠을 통해 데이터 학습

데이터셋을 저장시킨 이후에 데이터 학습시킴 2가지 방법으로 분리

이후 화면상에 문자가 출력되도록 만듦

플라스크를 이용해 웹에 코드 동작하게끔 만들기 -> tf이용한 데이터모델의 경우 실패

이후 도커 이미지로 만들어 결과물 배포하기

Requirements

Flask==2.2.2
opencv-python==4.6.0.66
mediapipe==0.9.0.1

Install

pip install -r requirements.txt

Usage

On terminal

python main.py

About

MediaPipe를 이용한 수어인식 프로그램(도커를 통해 배포)

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published