미니 비전프로의 오클루전 성능

HSC
조회 수 995
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
				
1등김치피자탕수육이좋다
		2023.12.23. 02:13					
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
						 김치피자탕수육이좋다 님께
				
		2023.12.23. 02:26					
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
					
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
						 HSC 님께
				
		2023.12.23. 02:54					
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
						 김치피자탕수육이좋다 님께
				
		2023.12.27. 22:48					
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
						 김치피자탕수육이좋다 님께
				
		2023.12.23. 02:30					
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
					
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
		2023.12.23. 05:08					
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
		2023.12.23. 10:14					
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
					
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 240809 수정	admin	18.08.04	119530	13
핫글	미니	여전히 카카오톡 이해가 안 가는 건 [16]	212212	11:20	1168	16
핫글	미니	텔레그램의 장점. [6]	아재건달_보노뭘보노	11:13	774	15
핫글	미니	갤럭시 S24 FE 공식 언박싱 영상 유출 [20]	노다	00:12	1736	14
220556	미니	미게 잘 되네요	놋철씁니다	18.06.27	547	0
220555	미니	츄라이츄라이 [1]	Elsanna	18.06.27	573	0
220554	미니	와! 미게!	Stellist	18.06.27	470	0
220553	미니	크흐 소통갓 베리힌님	놋철씁니다	18.06.27	532	0
220552	미니	여기 특별히 죽지 않으면 전 그냥 여기서 놀래요 [2]	놋철씁니다	18.06.27	973	0
220551	미니	근데 트래픽 늘어나면 어떻게 되나여 [1]	JordanKwon	18.06.27	636	0
220550	미니	안녕하세요	몽구스	18.06.27	262	0
220549	미니	모바일 ㅅㅅ	놋철씁니다	18.06.27	781	0
220548	미니	청와통닭보다는 [2]	노랑통닭	18.06.27	645	0
220547	미니	근데 이거 XE예요? [1]	놋철씁니다	18.06.27	890	0
220546	미니	도매인 이름 제가 한거임 생색 [1]	놋철씁니다	18.06.27	609	0
220545	미니	안녕하세요~~ [2]	프로겐	18.06.27	451	0
220544	미니	닉넴 변경 놋철씁니다 -> Minny	Minny	18.06.27	283	0
220543	미니	안녕하세요. 기립갤식입니다. [3]	기립갤식	18.06.27	563	0
220542	미니	KT LTE측정 [1]	Minny	18.06.27	393	0
220541	미니	구 미게 복구되었습니다. [1]	Minny	18.06.27	410	0
220540	미니	소식 듣고 와봤는데... 상당히 좋네요 [1]	기븐	18.06.28	577	0
220539	미니	피난소 와봤습니다 [1]	늙은이	18.06.28	357	0
220538	미니	기어S4, 갤럭시노트9과 함께 공개예정	BarryWhite	18.06.28	334	0
220537	미니	픽셀3 & 픽셀3XL 디자인 [2]	BarryWhite	18.06.28	380	0
220536	미니	놋9 루머	BarryWhite	18.06.28	245	0
220535	미니	애플, LGD에 OLED 400만장 주문?	BarryWhite	18.06.29	169	0
220534	미니	유출된 서피스폰 사진	BarryWhite	18.06.30	389	0
220533	미니	스피어닉 -> 스피어 닉변했습니다 ㅅㅅ [2]	스피어	18.06.30	241	0
220532	미니	오늘도 미게는 시간을 달립니다 [4]	블랙로봇	18.07.02	271	0

👨‍👩‍👧‍👦미코🌕

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

확장 변수

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정