미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	117678	13
핫글	미니	드디어 받았습니다 [11]	도나쓰	24.07.30	759	25
핫글	미니	The all-new OneUI 7.jpg [22]	파이랜	24.07.30	1669	19
핫글	미니	부산여행기 (feat.S23울트라)_스압주의 [6]	씨샾	24.07.30	260	15
206478	미니	s23u 오래 써야지 했는데 [9]	펄럭펄럭	24.01.18	784	1
206477	미니	드디어 프리뷰HDR이 아이폰과 픽셀 수준으로 개선되었군요 ㄷㄷ [2]	Sparrow	24.01.18	778	6
206476	미니	트루톤...? [3]	엣지	24.01.18	592	0
206475	미니	삼성 Ai기능 2025년도까지 무료 제공 [3]	갠냑시	24.01.18	1097	4
206474	미니	이번 울트라는 망원이 너프라고 봐야하나요? [3]	Pmg0207	24.01.18	747	3
206473	미니	엌 삼성 이거 인지하고 있었군요 [2]	HSC	24.01.18	1190	4
206472	미니	오늘 삼성 강남가면 실기기 볼 수 있나요? [3]	돈없는대학생	24.01.18	554	1
206471	미니	8gb도 너무한데 개인적으로 스냅 엑시 따로쓰는게.. [3]	주몽냥냥	24.01.18	816	3
206470	미니	AI는 애플하고 확실히 차별성을 보여줄 수 있을거 같기는 하네요 [3]	HSC	24.01.18	858	14
206469	미니	뭡니까 이거	🤏tozoom	24.01.18	561	2
206468	미니	?? 링 이름만 얘기하고 끝인가요 [2]	HAL	24.01.18	544	0
206467	미니	갤럭시 링! 하길래 웅장해졌다가 [8]	슈테르네	24.01.18	1114	0
206466	미니	헐 링이라니 이건 의외네요 [1]	띵똥	24.01.18	577	0
206465	미니	삼성, 원모어 띵!	갠냑시	24.01.18	528	0
206464	미니	갤럭시링 ?	미하엘무야허	24.01.18	199	0
206463	미니	헐 갤럭시링?? [8]	flair	24.01.18	878	9
206462	미니	노멀 국내 8기가 정말 정떨어지네요 [2]	Rekoj	24.01.18	817	2
206461	미니	S24 오피셜 광고	HSC	24.01.18	389	0
206460	미니	갤럭시S24 서클 투 서치	HSC	24.01.18	360	1
206459	미니	언팩에 안나올 주제같지만 One 6.1이랑 갤핏3가 궁금하네욬ㅋㅋㅋ [3]	flair	24.01.18	533	0
206458	미니	퀵쉐어 제한 풀어버림 [6]	갠냑시	24.01.18	902	1
206457	미니	아니 여기서 미스터 비스트가?	HSC	24.01.18	318	1
206456	미니	이제 sns 업로드 하면 화질 변하는 일은 없겠네요 [1]	펄럭펄럭	24.01.18	485	6
206455	미니	아까 콘서트 줌인 촬영 그거 뻥아니겠죠? [3]	HSC	24.01.18	577	3
206454	미니	언팩 영상미는 점점 발전하네요 [1]	Kanata	24.01.18	389	3

👩🏼‍💻미코🌧️

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정