미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 240809 수정	admin	18.08.04	117866	13
핫글	미니	KB국민카드..애플페이 구축 경력자 모집.jpg [8]	스퀴니	24.08.14	1067	9
핫글	미니	퀘이사존 완전히 zen5 손절쳤네요 [6]	212212	01:37	870	8
핫글	미니	픽셀 9 지문인식 영상.. [15]	스퀴니	24.08.14	986	7
205933	미니	[단독] 삼성전자, 서버용D램 반도체 결함 ‘8조원대 리콜’ 논란 “아마존에 사과”...‘어닝쇼크’ 이유? [1]	JamesBlake	19.03.28	411	0
205932	미니	S10+ 붙히기 쉬운 보호필름 추천좀 해주세요 [6]	CHIMAER*IZ	19.03.28	228	0
205931	미니	애플페이, 애플카드 국내 들어올 확률은 얼마나 될까요. [18]	브니엘	19.03.28	302	0
205930	미니	노트10 센서크기늘릴가능성높다라는 몽구스형님말은 신뢰성높긴한데.. [10]	우주정력황제갤럭시엠	19.03.28	298	0
205929	미니	개인적으로 애플페이는 느낌이 좀 그런게 [3]	[성공]함께크는성장	19.03.28	183	0
205928	미니	P30 시리즈의 OLED 공급사는 삼성·BOE [10]	Eidio	19.03.28	283	0
205927	미니	중국 디플 대빵 BOE의 작년 실적 [2]	Eidio	19.03.28	306	0
205926	미니	소니, TV, 오디오, 카메라, 모바일 사업부 통합 [3]	다잊어야해욥	19.03.28	133	0
205925	미니	S10 5G 통신사 물량이 으아주 적다는군요 [7]	맨유나이티드	19.03.28	217	0
205924	미니	s10e 떡락 ㄷㄷㄷㄷ [12]	배붕이	19.03.28	572	0
205923	미니	엣지 기술 유출 논리가 이거였던가요? [8]	귀주대첩	19.03.28	416	0
205922	미니	로지텍 키보드 좋군요 [3]	ㅁㅂㅁ	19.03.28	160	0
205921	미니	삼성 무충 보조배터리에서 소리가 나는데; [9]	회기동길냥이	19.03.28	4225	0
205920	미니	S11e는 안나오겠군요 [8]	그럴리가	19.03.28	1267	0
205919	미니	갤10e가 한자리대라고요? [4]	????	19.03.28	368	0
205918	미니	찌라시)갤럭시노트10 센서 후보는 현재 두가지 [16]	존버합니다	19.03.28	415	0
205917	미니	이제 보니까 P30 일반 모델은 OIS가 없네요 [3]	Eidio	19.03.28	190	0
205916	미니	사실 NPU의 힘으로 손떨방은 괜찮을지도 모르는데 [2]	qazsdf	19.03.28	212	0
205915	미니	결국 스펙차이가 화면 굴곡차이보다 중요하다는게 증명되는거 같네요.	자동출첵	19.03.28	168	0
205914	미니	P30 프로 vs 갤럭시 S10+ 폼펙터 비교 [6]	Eidio	19.03.28	305	0
205913	미니	OIS논란보니 삼성도... [4]	qazsdf	19.03.28	312	0
205912	미니	삼성에서 나오는 무충 충전기 중에 [12]	소나기	19.03.28	242	0
205911	미니	카메라논란을 삼전이 정면돌파할 수 있는 방법이 있습니다. [7]	갤러리별	19.03.28	332	0
205910	미니	하루에 한번씩 미니5 사고 싶다고 꾸준글 쓰고 싶어요. [6]	Helix	19.03.28	176	0
205909	미니	[단독] KT, 임직원에 5G 단말 비용 100만원 이상 지원 [16]	다잊어야해욥	19.03.28	327	0

👩🏼‍💻미코🇰🇷

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정