[AI] 수어 동작 인식 모델 만들기 - CNN과 LSTM
·
프로젝트/handDoc
들어가며우리 서비스의 핵심 기술 중 하나는 '수어 인식'이다. 수어를 인식하여 텍스트로 결과를 받아볼 수 있어야 했다. 처음에는 Ai Hub에 수어 데이터셋이 있길래 그거를 활용하면 어떨까 하는 생각이었지만, Ai Hub에는 우리가 원하는 단어와 문장이 없었다. 우리는 '감기' 진료 시에 환자가 자주 사용하는 단어가 필요했다. 예를 들어, "목이 아파요", "머리가 아파요" 와 같은 형태의 문장을 만들 수 있어야 했다. 결국 우리는 직접 데이터셋을 구축하기로 했다. 감기 진료 시에 환자가 많이 사용할 것 같은 단어 10개를 정했으며, 국립국어원 한국수어사전 에서 단어를 찾아 직접 수어를 하면서 영상을 촬영했다. 우리 팀원은 3명이었기 때문에, 3명이서 각 단어를 10번 촬영하여 약 300개의 데이터셋을 ..