분류 javascript

브라우저에서 직접 실시간 손 감지 (바운딩 박스) 프로토 타이핑을 위한 라이브러리

컨텐츠 정보

  • 조회 277 (작성일 )

본문

Handtrack.js는 브라우저에서 직접 실시간 손 감지 (바운딩 박스) 프로토 타이핑을 위한 라이브러리입니다.


https://github.com/victordibia/handtrack.js


아래에서는 이미지에서 손의 위치에 대한 경계 상자 예측을 제공하는 훈련 된 컨벌루션 신경망을 사용합니다.

컨볼 루션 신경망 (ssdlite, mobilenetv2)은 tensorflow 객체 감지 API (여기 참조)를 사용하여 훈련됩니다.


bossflip.gif 


라이브러리는 웹 애플리케이션에서 손 / 제스처 기반 상호 작용의 프로토 타입을 만들 수 있는 유용한 래퍼로 제공됩니다. 이해할 필요 없이. html 이미지 요소 (예 : img, video, canvas 요소)를 가져 와서 경계 상자, 클래스 이름 및 신뢰도 점수의 배열을 반환합니다.


라이브러리는 또한 몇 가지 유용한 기능 (예 : FPS를 가져 오는 getFPS, 캔버스 요소에 경계 상자를 그리는 renderPredictions) 및 사용자 정의 가능한 모델 매개 변수를 제공합니다.


doodle.gif 


pong.gif