미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	117559	13
핫글	미니	이번 폴드 플립 설계는 도대체 뭔 생각으로 한건지 궁금하네요 [37]	애애앵	24.07.20	1821	30
핫글	미니	하....폴6 신고식 씨게 하네요... [4]	대호나이	24.07.20	1320	18
핫글	미니	포렌식은 정말 제한적으로 가능합니다 [11]	스이공	24.07.20	1223	14
205576	미니	작년은 삼성이 TSMC한테 재대로 초격차 당했는데요. [3]	요트맨	24.01.11	1269	2
205575	미니	고스톱에서 원고 다음에는 뭐죠? [14]	GLaD	24.01.11	735	9
205574	미니	디멘 9400 코어 구성 루머가 떴네요 [6]	1q2w3e4r!	24.01.11	783	2
205573	미니	쿠팡 15프맥 반품-상 구매한게 왔습니다. [14]	아르띠	24.01.11	1669	16
205572	미니	갤럭시북4 프로 열일하네요 [3]	우주안녕	24.01.11	1481	3
205571	미니	안드로이드에서 애플뮤직 음성 조작 가능할까요? [11]	콜홍	24.01.11	577	0
205570	미니	이번 S24 민팃은 [8]	던힐6m	24.01.11	1344	0
205569	미니	블랙매직캠 미디어 드롭프레임이 많이 생기네요	댕밤	24.01.11	231	0
205568	미니	2023년 PC 시장은 HP만 그나마 선방했군요. [1]	Stellist	24.01.11	660	3
205567	미니	썬더볼트4 독 중 호스트 포트가 뒤에 있는 건 없을까요?? [2]	수학교사	24.01.11	274	0
205566	미니	아이폰 노멀 모델에 120hz 적용 되려면. [7]	아재건달_보노뭘보노	24.01.11	709	0
205565	미니	아이폰 17 일반형 LTPO(프로모션~120Hz)탑재가 전망되는 이유는 [8]	요트맨	24.01.11	1150	7
205564	미니	S23울트라 사용하다가 아이폰 15프로맥스 사용 후기 [13]	언제나소년	24.01.11	1709	14
205563	미니	진정한 의미의 브랜드 분리는 故팬택이 시도한 바가 있죠.... [2]	Why'zner	24.01.11	1038	9
205562	미니	삼성보다 먼저 고급 브랜드 분리를 시도했던 회사 [14]	하루살이	24.01.11	1899	7
205561	미니	S24 시리즈 홍보 자료대로라면 베이퍼챔버는... [9]	흡혈귀왕	24.01.11	2432	9
205560	미니	S24 홍보교육자료가 노출 되었는데... [10]	좌지우건	24.01.11	2776	6
205559	미니	삼닷 전용 컬러를 구매하려면 [3]	최단장	24.01.10	661	3
205558	미니	24에 적응형 컬러톤이 들어간다네요 [11]	나무김	24.01.10	1612	7
205557	미니	S23울트라하고 S24울트라 차이클까요? [10]	dlwlrma	24.01.10	1205	6
205556	미니	vivo는 HDR 아직 멀었네요 [13]	S.R	24.01.10	804	3
205555	미니	구트라 Termux 데비안12 리눅스에 한글 2010 설치 완료 [5]	흡혈귀왕	24.01.10	605	6
205554	미니	4070 Super... 이제 엔당도 색깔 장사를 하는 겁니까? [3]	Aimer	24.01.10	923	5
205553	미니	2FA 앱 추천 받습니다 [3]	[성공]함께크는성장	24.01.10	342	0
205552	미니	잡담: XPS 14 vs 갤럭시 북4 Pro 14 vs 맥북프로 14 [5]	Section31	24.01.10	896	0

👩🏼‍💻미코🌧️

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정