미니 비전프로의 오클루전 성능

HSC
조회 수 983
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	114592	13
핫글	미니	애플 제품들이 중고판매도 잘되네요. [21]	잇흥	10:45	887	14
핫글	미니	마소는 제발 기본 앱의 웹앱화를 멈춰달라..!! [15]	Fluent	15:34	665	13
핫글	미니	iPhone 16 Pro Max [9]	iceuniverse	13:02	955	11
205835	미니	갤럭시 A33 안드로이드 14 및 One UI 6 업그레이드 [1]	운김	24.01.04	403	1
205834	미니	AMD 프로세서 관련해서.. 이런 주장이 요즘 종종 나오더라고요 [2]	스퀴니	24.01.04	633	3
205833	미니	워치6 클래식 vs 갤럭시핏3 뭐가 나을까요 [8]	갤럭시S23	24.01.04	1172	0
205832	미니	요즘은 갤럭시도 그립감이 나쁘네요. [4]	shaind	24.01.04	823	6
205831	미니	잡담: (디씨펌) 8+ Gen 3(가칭), GPU 1GHz서 전압 높아 [1]	Section31	24.01.04	858	1
205830	미니	폴드4/플립4/S22시리즈 OneUI 6.0 보안패치 개선 버전 빠르면 오늘 저녁 배포군요 [2]	미붕붕드링크	24.01.04	656	4
205829	미니	[란즈크]갤럭시S24 울트라 AI 특성화 줌 기능 티징 이미지 [13]	Angry	24.01.04	1368	11
205828	미니	전 램적은건 사용자경험 문제라고 생각합니다.. [13]	노틀담의꼽추	24.01.04	1071	17
205827	미니	스마트태그2 도로록 소리 [11]	addce	24.01.04	717	0
205826	미니	한달 써보고 답 없으면 맥으로 가야겠네요.	어리아리	24.01.04	484	2
205825	미니	라이젠 7 8700G 긱벤치도 나왔네요 [3]	스퀴니	24.01.04	659	0
205824	미니	가우스 관련 정보는 많이 없나봐요 [5]	던힐6m	24.01.04	794	0
205823	미니	삼성 인터넷 PC 버전은 안나오는 건가요 😒 [6]	우주안녕	24.01.04	904	3
205822	미니	갤탭 애니메이션 이거 맞나요? [5]	미하엘무야허	24.01.04	1111	4
205821	미니	S23+ 사전예약 갤캠스 얼마까지 하락햇는지 아시는분 계실까요 [3]	S7엣지	24.01.04	798	0
205820	미니	여행 보조배터리 추천 [12]	들판과트랙의별	24.01.04	856	0
205819	미니	트레이드인 안내페이지 드디어 찾았네요.. [6]	적당히하자	24.01.04	897	3
205818	미니	또 한 번. 새로운 시대의 시작.	개구리	24.01.04	657	4
205817	미니	원래 노트북 마이크 음질이 이렇게 형편없나요..? [7]	털고양이	24.01.04	623	1
205816	미니	파손 갤탭 씨가 말랐군요	인헤리턴스	24.01.04	549	0
205815	미니	인류는 퇴화하고 있습니다 [1]	마키세크리스	24.01.03	793	2
205814	미니	23으로 반등하고 [2]	kwqoskak	24.01.03	1208	13
205813	미니	2월부터 MS 365 가격 인상이군요 [4]	[성공]함께크는성장	24.01.03	613	0
205812	미니	램 추가 질문 [3]	늅늅	24.01.03	306	0
205811	미니	흔히들 알려진 케이스 브랜드 말고 [12]	Angry	24.01.03	682	2

👩🏼‍💻미코🌿

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정