미니 비전프로의 오클루전 성능

HSC
조회 수 983
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	115081	13
핫글	미니	Urging Samsung to improve its camera [9]	iceuniverse	11:00	713	9
핫글	미니	S24+는 지금까지 써본 폰중에서 가장 만족스럽네요. [12]	Gottago	13:32	567	7
핫글	미니	한국에서는 볼 수 없는 환상의 갤럭시 옵션 [15]	GLaD	05:18	1493	6
206344	미니	엣지브라우저.. AV1 가속 드디어 부활했네요 [1]	스퀴니	24.01.12	818	2
206343	미니	oneui 6 가장 불편한거 2가지 [2]	모코코	24.01.12	873	2
206342	미니	업무용 노트북 새로 샀습니다. [9]	정현	24.01.12	996	15
206341	미니	삼성인터넷 클립보드 왜 이럴까요 [2]	찌그렁오리	24.01.12	450	1
206340	미니	엑시노스 인식은 딱 이정도.. [13]	곰장수	24.01.12	3115	14
206339	미니	올해 첫 지름 입니다. [3]	푸룬시럽	24.01.12	471	7
206338	미니	새해기념 장난감 하나 샀슈 [7]	김애용	24.01.12	959	10
206337	미니	챗 GPT는 신입니다. 영여 한국어 번역 자막 생성 [12]	HSC	24.01.12	4140	11
206336	미니	애플코리아 작년 영업익 5600억…1년 새 550% '폭증' [12]	요트맨	24.01.12	1301	3
206335	미니	갤럭시 A25 초간단 후기 [9]	Q815S	24.01.12	2126	9
206334	미니	갤럭시 A31 펌웨어 업데이트	운김	24.01.12	247	0
206333	미니	긱벤치 5) A17, 스냅 8 gen3, 엑시노스 2400 [11]	요트맨	24.01.12	1943	4
206332	미니	서피스 왜 이렇게 예쁘죠 [1]	SeoH	24.01.12	1073	11
206331	미니	유출 애니메이션을 보고 생각난 6.1에 바라는 점 [16]	MiKor82	24.01.12	1434	13
206330	미니	아너 매직V2 포르쉐디자인 생긴건 맘에 드는데.. [5]	Stellist	24.01.12	609	1
206329	미니	칼디짓 좋나요?? [6]	SeoH	24.01.12	800	0
206328	미니	One ui 6.1 에니메이션 유출 [10]	갠냑시	24.01.12	1660	2
206327	미니	S울트라 + 맥세이프 케이스 쓰시는 분 계신가요? [10]	던힐6m	24.01.12	716	1
206326	미니	24울트라 실기기 영상이 올라왔네요 [17]	나무김	24.01.12	1866	5
206325	미니	중고 s23u vs 새거 s24u [18]	땃쥐페이	24.01.12	1189	1
206324	미니	갤럭시 글로벌 목표 잠금화면 쓰시는분있나요??	aleji	24.01.12	410	0
206323	미니	이온2 근황 [7]	늅늅	24.01.12	1679	14
206322	미니	매직6프로 망원카메라 특이하네요 1억 8천만화소 2.5배줌... [4]	Stellist	24.01.12	566	3
206321	미니	잡담: 엑시노스 1480 GPU 컴퓨트 긱벤치6 점수 = 4100+ [2]	Section31	24.01.12	954	2
206320	음향	능금음악 고전 [5]	Starlight	24.01.12	390	3

👩🏼‍💻미코🌞

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정