미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 240809 수정	admin	18.08.04	117845	13
핫글	미니	Apple Intelligence는 허상입니다. [27]	noop	13:12	1596	17
핫글	미니	갤럭시 워치 울트라 질렀습니다 [18]	AurA	10:09	877	11
핫글	미니	One UI 7 기대해 주세요 [19]	iceuniverse	16:39	1174	10
206015	미니	강남 삼성스토어 다녀왔습니다 [11]	수크	24.01.18	934	7
206014	미니	갤럭시 북4 Pro Samsung Settings 오류	두꺼비감자칩	24.01.18	412	0
206013	미니	국내외 엑시노스2400 반응이 재미있네요 [18]	갠냑시	24.01.18	2780	21
206012	미니	S24 시리즈 정품 필름 가격 상태가?? [8]	만년휴학중	24.01.18	1277	5
206011	미니	아이폰 출하량 및 점유율(2007-2022)	요트맨	24.01.18	260	4
206010	미니	s24u nd필터	펄럭펄럭	24.01.18	541	4
206009	미니	저 구매할건가봐요,,, [1]	빅코	24.01.18	424	1
206008	미니	s24 체험하신 분들 터치 반응속도는 어떤가요? [3]	햄버거조아	24.01.18	809	0
206007	미니	S24의 네비게이션바는 왜 [3]	감자너겟	24.01.18	882	1
206006	미니	삼성 강남에 못가서 찾아본 S24U 블루 [16]	fin	24.01.18	1409	6
206005	미니	갤럭시 탭 S8 시리즈 5G 안드로이드 14 재 배포	운김	24.01.18	281	0
206004	미니	화면 반사 비교 [12]	봄차	24.01.18	970	16
206003	미니	S24U 카메라 화질 비교영상 (10배 및 야간모드 등) [19]	Sparrow	24.01.18	1081	11
206002	미니	S24U 옐로우로 바꾸고 왔습니다... [5]	Rangs	24.01.18	801	5
206001	미니	경)S24 PWM 개선(축 [13]	도기	24.01.18	2389	18
206000	미니	울트라냐 플러스냐.. [4]	기만심문관	24.01.18	442	3
205999	미니	민팃 추가보상은 어디서 보나옹 [4]	갠냑시	24.01.18	352	0
205998	미니	구글 ai는 헷갈려요. [2]	AurA	24.01.18	361	0
205997	미니	S24 시리즈 구경하고 왔읍니다	익명	24.01.18	524	4
205996	미니	Wine 9.0 발표 [2]	스퀴니	24.01.18	568	2
205995	미니	갤북4는 서멀컴파운드 이슈도 있나 보군요.(with 방열판 너무 작음)	오꾸리	24.01.18	421	0
205994	미니	S24 AR 스크린 프로텍터가 AS 센터에서 붙여주는 정품필름과 같은것일까요? [1]	김선달	24.01.18	640	1
205993	미니	엑시2400 ISP 최대 320MP 맞았네요 ㅋㅋㅋ [3]	흡혈귀왕	24.01.18	960	5
205992	미니	울트라 퍼플 보고 왔어요 [9]	사료능동공급기	24.01.18	566	4
205991	미니	리밴스드 패치가 곧 막을 내릴 가능성? [4]	[성공]함께크는성장	24.01.18	801	0

👩🏼‍💻미코🌧️

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정