미니 비전프로의 오클루전 성능

HSC
조회 수 983
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	116557	13
핫글	미니	버즈3 프로, 워치 울트라가 벤츠 출신 디자이너 첫 제품이라네요. [38]	Stellist	24.06.25	1680	25
핫글	미니	스마트태그2 업데이트 [13]	a1001	24.06.25	978	12
핫글	미니	이거 왜이렇게 정자같나요 [9]	Pepsi베어	24.06.25	1091	9
205778	미니	웨어러블 앱 때문에 [9]	솅종	24.01.03	632	8
205777	미니	갤럭시 A55 공식 렌더링 유출:엑시노스 1480 탑재 [9]	요트맨	24.01.03	1067	8
205776	미니	올해는 패턴을 깨고 다시 아이폰으로 가야 할 것 같군요... [16]	Stellist	24.01.03	1410	13
205775	미니	뭐.. 가격 인상된거 충분히 그럴수도 있다고 생각합니다 [9]	털고양이	24.01.03	812	3
205774	미니	삼세페 뭔가 싼데 비싸네요 [1]	Mar.7th	24.01.03	660	0
205773	미니	다른동네에서 24시리즈 가격유출이 됐는데 [46]	나무김	24.01.03	1869	9
205772	미니	저는 구글 서비스들이 조금이라도 더 좋아졌으면 좋겠습니다. [6]	하루살이	24.01.03	454	1
205771	미니	neo qled 43인치 8k [2]	닉넴이	24.01.03	337	1
205770	미니	One UI 6.1은 24U에서 경험해보겠네요 [1]	OneUI2	24.01.03	702	2
205769	미니	오피스 설치가 안되는데 왜이런가요?? [2]	미세먼지주의보	24.01.03	327	0
205768	미니	S23 펌웨어는 대체 언제.... [9]	Mersin.IY	24.01.03	896	7
205767	미니	S7 FE 유저가 S9 FE 만져보고 온 후기 [12]	cmbbb	24.01.03	1589	3
205766	미니	이제 갤럭시핏만 나오면 됩니다. [3]	아재건달_보노뭘보노	24.01.03	574	2
205765	미니	S9Fe 삼성매장가서 예약했네요 [3]	후누후누	24.01.03	561	4
205764	미니	S24 전파인증이 많이 늦네요 [4]	나무김	24.01.03	720	1
205763	미니	갓태북 신화 [3]	Starlight	24.01.03	1322	11
205762	미니	애플케어+는 왜 환급이 안되는지 찾아보니 [5]	Futuristics	24.01.03	698	2
205761	미니	갤북4 16인치 고민되네요 [9]	Pongdang	24.01.03	553	0
205760	미니	애플워치 울트라 1세대도 버벅임이 있네요 [9]	에피	24.01.03	645	0
205759	미니	저는 엘지폰 쓰는데욥 [2]	아재건달_보노뭘보노	24.01.03	499	4
205758	미니	갤럭시 북 4 프로 16인치 후기 [8]	재미노나	24.01.03	2760	4
205757	미니	애플 삼성얘기는 여전하네요ㅋㅋㅋㅋ 전 아직도 S10쓰는데... [9]	아이우에오	24.01.03	1410	12
205756	미니	갤럭시 북4 울트라 구매했는데, 소식들을 보면.. [4]	우리	24.01.03	660	1
205755	미니	올해 첫 택배가 왔습니다 [1]	버거킹아메리카노	24.01.03	384	7
205754	미니	14나노부터 황텔 신공정 프로세서는 거르는게 답이죠 [4]	노틀담의꼽추	24.01.03	723	2

👩🏼‍💻미코🌞

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정