미니 비전프로의 오클루전 성능

HSC
조회 수 987
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 240809 수정	admin	18.08.04	118680	13
핫글	미니	[애플] 음익 [4]	욱농	17:45	632	20
핫글	미니	misakaX) 아이폰 13 프로 AOD [4]	Alternative	13:56	775	11
핫글	미니	iOS 18의 혁신(?) 중 하나 [8]	Stellist	13:24	1151	11
207636	미니	요즘 워치는 스마트워치도 아니죠 솔직히 [7]	슈피리어	21.08.19	807	10
207635	미니	담당자님 안녕하세요 [4]	Futuristics	21.08.18	735	10
207634	미니	플립보다 폴드 실물이 미쳤네요 [5]	Eliole	21.08.15	1014	10
207633	미니	S10e가 Z 플립3보다 좋은 이유 [11]	MrGom™	21.08.14	875	10
207632	미니	여러분이 모르는 플립 소소한 디테일 [5]	오토카모	21.08.14	649	10
207631	미니	질렀슈 [1]	쪼다	21.08.13	279	10
207630	미니	워치 광고 보셨나요 엄청 웃기네요 [5]	혼다히토미	21.08.13	595	10
207629	미니	방 정리하는데 현타 개씨게 오네요 아 [21]	릅갈통	21.08.13	760	10
207628	미니	기사로 자꾸 불을 지피는거 같아요 [16]	LG산흑우	21.08.13	543	10
207627	미니	왜 유도리를 잇섭에게만 바라는지 모르겠습니다. [13]	낭만올빼미	21.08.13	601	10
207626	미니	워...치 취소...분 결제 성...공 했읍니...다. [4]	만두는호빵이다.	21.08.12	466	10
207625	미니	광고 논란 정리해보자면... [22]	CodenameKhan	21.08.12	784	10
207624	미니	미믹스4랑 폴드3 UDC로 비교하는건.... [2]	Kanata	21.08.12	573	10
207623	미니	하진짜 워치4 못생겨서 별론데 ㅡㅡ [4]	긴닉네임2002250504	21.08.12	763	10
207622	미니	뭐가 이리 당당할까요.. [16]	지대공지름미사일	21.08.11	1055	10
207621	미니	탭s7 FE 또 다른 통수 [14]	폴드엣지	21.08.10	1046	10
207620	미니	누가 저를 이렇게 몰았나요 [6]	요크	21.08.10	944	10
207619	미니	자기야, 3주년이야 [15]	Aimer	21.08.10	669	10
207618	미니	───근본─── [6]	한겹	21.08.09	628	10
207617	미니	폴드3 \| 플립3 [8]	애쁠마시따	21.08.08	909	10
207616	미니	갤탭용 키보드 3종 비교..(같은 넋두리) [7]	dalamzi	21.08.07	1825	10
207615	미니	iOS15 이거 은근 좋네요 [9]	S.LSI	21.08.06	1105	10
207614	미니	엑스페리아 1 iii 간단 후기 [10]	팬텀	21.08.06	954	10
207613	미니	PS5 APU로 보는 RDNA2 다이 사이즈 [8]	흡혈귀왕	21.08.06	1522	10
207612	미니	카메라 성능 향상 내역이 있군요! [6]	흡혈귀왕	21.08.05	661	10

👨‍👩‍👧‍👦미코🌕

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정