미디어파이프 태스크 (AI 인식 데모 모음)
구글 미디어파이프의 인식 기능 15가지를 한 페이지에서 차례로 시험해 보는 데모 모음입니다. 얼굴·손·자세 검출과 손동작 인식, 이미지 분류와 영역 분할, 사물 검출, 소리 분류, 언어 판별과 문장 분류까지 들어 있습니다. 계산은 브라우저 안에서 이루어집니다.
📸
웹캠 하나로 노는 AI
설치도 로그인도 없이, 카메라만 켜면 됩니다. 몸을 움직이면 화면이 따라오는, 가장 빨리 "와" 소리가 나오는 자료들입니다.
카메라 권한을 물어보면 허용해 주세요. 영상은 기기 안에서만 처리되고 어디로도 보내지 않습니다.
1
몸으로 조종하기
손과 몸의 움직임을 실시간으로 읽습니다. 제스처만으로 게임까지 해봅니다.
2
나를 캐릭터로
내 표정과 동작을 그대로 따라 하는 캐릭터를 만듭니다. 낙서가 나를 따라 춤춥니다.
애니메이션 모션 트래킹
MediaPipe와 TensorFlow를 이용하여 캐릭터 애니메이션을 만들 수 있습니다. 이 기능은 사람의 얼굴 또는 전체를 인식해서 캐릭터가 따라 움직이는 것을 구현하였습니다.
포즈 애니메이터 (웹캠)
촬영한 영상에서 실시간으로 사람의 포즈와 얼굴을 인식하고, 이를 움직이는 캐릭터 애니메이션으로 만드는 앱입니다.
Holobooth 캐릭터 애니메이션
MediaPipe의 FaceMesh를 활용해서 얼굴을 인식하고, 이를 바탕으로 가상의 아바타를 만들어 주는 앱입니다.
Scroobly (모션 캡처 낙서)
웹캠을 통해 내 움직임을 인식하고, 내가 그린 낙서 캐릭터가 그 움직임을 그대로 따라 하게 만드는 모션 캡처 AI입니다.
3
놀이가 되는 인식
카메라로 물건을 찾고, 동작으로 격투를 하고, 직접 가르쳐 팩맨을 움직입니다.
이모티콘 보물 찾기
제시된 이모티콘과 같은 사물을 주변에서 찾는 게임입니다. CNN을 통해 이미지를 예측하고, 예측과 정답(이모티콘)의 일치 여부를 확인합니다.
동작 인식 격투 게임
TensorFlow와 카메라를 이용한 동작 인식으로 캐릭터를 조종할 수 있는 게임입니다. 게임 캐릭터가 사용자의 행동을 따라서 상대방을 공격합니다.
팩맨 머신러닝
이미지 인식을 통해 방향을 조작할 수 있도록 만든 팩맨 게임입니다. 사전 훈련된 모바일넷 모델을 4개 방향의 동작 인식에 활용하였습니다.