미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	117750	13
핫글	미니	미출시 기기 3형제 [8]	Seol	24.08.06	784	13
핫글	미니	삿슈 폴드6 [1]	Minny	24.08.06	531	13
핫글	미니	초A급으로 보관중인 갤s8 인증이요. [8]	niotree	24.08.06	685	10
206609	미니	아무리 봐도 노말이랑 플러스가 울트라보다 훨씬 예쁘네요.. [10]	라시드	24.01.18	827	9
206608	미니	갤럭시 링에 기대하는 단 한가지 [6]	Stellist	24.01.18	559	3
206607	미니	색상들은 기본이랑 플러스가 훨씬 이쁘네요 [8]	갤럭시S23	24.01.18	663	4
206606	미니	전24플 달립니다 [1]	갠냑시	24.01.18	378	2
206605	미니	ipc가 확실히 오르긴 한 것 같네요 [2]	1q2w3e4r!	24.01.18	476	1
206604	미니	잡담: 근데 왜 S24/S24+ 소개에는 AP 이름이 없을까요. [6]	Section31	24.01.18	751	3
206603	미니	S24U 망원 10.1~100배 구간 성능은 S22U와 S23U 사이 느낌이네요 [2]	흡혈귀왕	24.01.18	623	1
206602	미니	갤럭시AI가 제미니라고 해서 까기 어려운 이유 [10]	오래된정원	24.01.18	988	7
206601	미니	애플이 드디어 한국도 동양인걸 알아차렸나봅니다. [5]	Stellist	24.01.18	1308	14
206600	미니	제가 못찾은건지 모르겠지만 아쉬운 점	SeoH	24.01.18	299	0
206599	미니	S24U 5배줌 관련해서 문득 든 생각... [1]	GLaD	24.01.18	442	0
206598	미니	뽐뿌발 24U 카메라 테스트 충격적이네요.. [15]	맞는말만함	24.01.18	1442	9
206597	미니	이번 s24 아이폰과 비슷한 aod 들어간거 아닌가요? [9]	trigun	24.01.18	779	2
206596	미니	확실히 삼성은 마개조를 잘합니다? [8]	갠냑시	24.01.18	921	1
206595	미니	S24 AI걱정되는거 1가지요 [8]	SOCOM	24.01.18	597	1
206594	미니	침착맨x궤도 갤럭시&SKT 광고 방송하네요	에피	24.01.18	470	1
206593	미니	보고 왔습니다 [5]	오레오가좋아	24.01.18	616	7
206592	미니	민팃 추가보상 희한하네요 [15]	빅코	24.01.18	938	4
206591	미니	잡담: 방금 트윗은 조크였다고 합니다. [2]	Section31	24.01.18	697	0
206590	미니	확실히 IPC 향상이 있네요 [2]	갠냑시	24.01.18	697	0
206589	미니	갤럭시AI 업데이트 대상 구형기종 확인 [15]	Stellist	24.01.18	1258	4
206588	미니	엑시2400 실기기 삼디막 벤치 떴네요 [4]	맞는말만함	24.01.18	1134	3
206587	미니	매장에서 보고 온 S23U와 S24U 카메라 체감 [3]	212212	24.01.18	852	9
206586	미니	삼성 강남을 시작으로 주말 스마트폰 AS가 가능해지는군요.	미붕붕드링크	24.01.18	549	3
206585	미니	Qi2 탑재는 S25에선 될까요 [4]	MrGom™	24.01.18	904	2

👩🏼‍💻미코🌧️

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정