미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	116927	13
핫글	미니	CMF Phone 1 [5]	헤메	24.07.03	816	10
핫글	음향	버즈2 프로 eq 공유(wavelet 치찰음 수정) [2]	씨샾	24.07.03	625	8
핫글	미니	아이폰 16 칩셋 루머가 나왔네요 [11]	212212	24.07.03	1238	6
204921	미니	전문가는 Z Flip4든 S21U, S22U를 던저줘도 [10]	맛폰은디지바이스	23.01.29	1541	13
204920	미니	블라인드 테스트 2탄 (s22u) 19시 결과 공개 [18]	씨샾	22.09.18	1541	2
204919	미니	비꼬려는 의도가 전혀 아니었는데요..;; [9]	이라세오날	22.09.14	1541	22
204918	미니	삼케플 3년 보장 의미가 이건가요? [3]	[성공]함께크는성장	22.07.18	1541	0
204917	미니	애플이 요근래 램에 관대해진 이유가 뭘까요? [17]	Ap좋은놈	22.05.30	1541	0
204916	미니	탭칠플 삼케플도 끝나가네요 [2]	DKV2	22.05.27	1541	2
204915	미니	요즘 돔글라스 어떤가요.. [14]	흡혈귀왕	22.02.15	1541	0
204914	미니	놀라운 에이수스 소식..gisa [9]	스퀴니	21.12.30	1541	11
204913	미니	20대도 좋아하는 태블릿 [15]	MrGom™	21.11.21	1541	16
204912	미니	곧 1TB/16GB가 될 기기 [26]	Aimer	21.10.11	1541	12
204911	미니	내가 누구??? [6]	시엠	21.06.05	1541	4
204910	미니	미코 끊습니다 [19]	슝이	21.01.18	1541	14
204909	미니	엑시2500과 스냅8젠4 성능차이가 몇프로이내여야 [39]	S24울트라존버	24.04.21	1540	1
204908	미니	S23시리즈 One UI 6 베타게시판 등장 [7]	OneUI2	23.07.25	1540	17
204907	미니	s23 3월 업데이트 내용 [10]	흰하나	23.03.30	1540	22
204906	미니	애플이 성능 저하 펌웨어를 배포했습니다 [18]	피스	22.10.23	1540	12
204905	미니	플립4 9W 무선충전속도?!👿 [14]	갤럭시Z플립4	22.06.02	1540	2
204904	미니	인터넷 최강폰 쓰는 오너 입니다 'ㅅ' / [9]	히타기새	22.04.28	1540	2
204903	미니	xda 퀵픽 mod 쓰다 망한자의 결말 [4]	시공	22.04.20	1540	4
204902	미니	더 버지에서 단점 : 비쌈이 지적된 레이저 블레이드 17 (2022) [12]	Stellist	22.02.23	1540	11
204901	미니	슈퍼X더... 어찌 다 맞아떨어질랑가요? [6]	독고노인	22.01.13	1540	5
204900	미니	아이폰13 프로, 프맥 유저분들께 질문드립니다 [27]	전자정보공학부	21.11.03	1540	1
204899	미니	삼성 갤럭시 S22 렌더링 (letsgodigital) [35]	Railgun	21.06.28	1540	4
204898	미니	S21U 오늘자 정산 스냅샷 [6]	흡혈귀왕	21.04.06	1540	4
204897	미니	Game Optimizing Service 정말 짜증이네요 [6]	여가어딥미코	20.08.28	1540	0

👩🏼‍💻미코🌞

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정