로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

HSC

미니 비전프로의 오클루전 성능

  • HSC
  • 조회 수 984
  • 2023.12.23. 02:07

 

 

초록색 점은 핸드트래킹 지점입니다.

 

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

 

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

 

성능이 누끼따는건 매우 좋아보이는데

 

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

 

이부분은 현재 베타니 개선될 여지가 있습니다.

 

댓글
7
김치피자탕수육이좋다
1등 김치피자탕수육이좋다
2023.12.23. 02:13

 

 

성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:26

이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요

 

비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)

 

뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요

 

퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

[HSC]님의 댓글을 신고합니다. 취소 신고
김치피자탕수육이좋다
김치피자탕수육이좋다 HSC 님께
2023.12.23. 02:54

아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.27. 22:48

아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서

 

저렇게 구현할수는 있겠네요 ㅋㅋㅋ

[HSC]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:30

현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.

 

왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요

 

 

[HSC]님의 댓글을 신고합니다. 취소 신고
2등 Eomjunsik
2023.12.23. 05:08

다들 기술력이 정말 대단하네요.

"고작" M2 정도 연산 능력으로 저 처리를..

[Eomjunsik]님의 댓글을 신고합니다. 취소 신고
노멀라이즈
3등 노멀라이즈
2023.12.23. 10:14

https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer

그냥 모바일에서도 충분히 됩니다.

이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.

이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 

혹시나 해서 추가 합니다.

z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.

다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

[노멀라이즈]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 230228 수정 file admin 18.08.04 116805 13
핫글 미니 사실 워치 울트라?... 돈값 힘들거 같습니다. [9] 윤이 24.07.01 989 15
핫글 미니 폴드6, 플립6, 워치7, 워치 울트라 국내 출고가 유출 [32] update 노다 24.07.01 1413 11
핫글 미니 저의 다음폰은 아이폰입니다 [13] update KIKIRAKA 24.07.01 1002 11
204831 미니 아이폰 15 프로 AOD 다 좋은데..번인 [8] file Kanata 23.12.26 1633 3
204830 미니 어제 갤럭시 S23 FE 아버지 효도르폰 해드렸습니다. [2] 요트맨 23.12.26 541 7
204829 미니 애플워치는 결국 미국에서 판매금지 확정이네요. [11] Stellist 23.12.26 1246 8
204828 미니 메테오레이크부터 7시리즈의 p코어가 2개 늘었는데 영향이 얼마나 있을런지 궁금하네요. [5] 이치고 23.12.26 498 0
204827 미니 갤럭시 탭 A7 라이트 Wi-Fi 펌웨어 업데이트 file 운김 23.12.26 199 1
204826 미니 호주 아이폰15 프맥 애케플 한국껄로 가입했어요 [3] 후웨이 23.12.26 421 0
204825 미니 모바일 원신을 4k로 돌리면 생기는일 [7] 베인글로리장인 23.12.26 1202 1
204824 미니 6Ghz [4] file 염화은 23.12.26 771 5
204823 미니 크리스마스에 집에 내려와 발견한 것 [8] file Stellist 23.12.26 884 13
204822 미니 워치5 최근까지 버벅이다가 업뎃후 좋아졌네요 [3] Rekoj 23.12.26 812 2
204821 미니 벨벳입니다. [10] file 아재건달_보노뭘보노 23.12.26 736 7
204820 미니 잡담: (뜬금포?) 삼성, 갤럭시 북3 Go 5G 공개 및 출시 [16] Section31 23.12.26 946 3
204819 미니 S24U는 5배 50MP에서 최대 몇배율로 촬영되려나요. [1] 흡혈귀왕 23.12.26 506 0
204818 미니 iptime Easy mesh 참 좋네용 허헣 [9] file whale 23.12.26 881 4
204817 미니 s23 울트라 대비 s24 울트라로 넘어갈 유인이 뭐가 있을까요? [11] 푹스 23.12.26 1021 1
204816 미니 불치병 ON [5] 마키세크리스 23.12.26 741 10
204815 미니 선생님들 hex installer 아시나요? [7] file maMeong 23.12.26 755 1
204814 미니 갤럭시 북 4 프로 14를 일주일 정도 사용해보며... [12] 어리아리 23.12.26 1523 7
204813 미니 샤오미 하이퍼 OS의 AOD라네요 [21] file MrGom™ 23.12.26 2729 18
204812 미니 갤북 삼성 앱들 모두 로그아웃되었네요 [2] 비둘기야먹자 23.12.26 1008 5
204811 미니 S25U에선 폴디드 망원 크게 개선되길 바랍니다. [22] file 흡혈귀왕 23.12.25 1414 7
204810 미니 그램은 왜 이 시점에 3050 쓴 걸까요 [18] MrGom™ 23.12.25 1219 5
204809 미니 탭s7 fe와 탭a9+ 중 고민이네요 [2] 거꾸로보일러 23.12.25 441 0
204808 미니 LG 그램 프로 / LG 그램 프로 360 스펙 및 가격 [7] AlieNaTiZ 23.12.25 995 5
204807 미니 [꿀단지PD] 갤럭시 북4 프로 16인치 [1] 우주안녕 23.12.25 889 1

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...