미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 240809 수정	admin	18.08.04	117893	13
핫글	미니	s25 울트라 이 루머 렌더링 완전 맘에 드네요 [13]	maMeong	15:58	1056	19
핫글	미니	역시 노트20은 존재하면 안 되는 폰이었습니다. [18]	Fluent	18:19	751	14
핫글	미니	아무리 불편해도 카메라가 중요하면 외산폰을 찾게 됩니다 [11]	클래식크롬	15:09	719	14
34748	미니	애플워치 밀레니즈 루프 사려는데 왜 골드만 저렴하죠. [9]	그렇군요	22.05.23	971	2
34747	미니	워치 5 시리즈에선 베젤링 아예 빼나 보네요 [5]	KIKIRAKA	22.07.08	971	0
34746	미니	유튜브 댓글 입력창이 뭔가 바뀐 모양이네요? [9]	숨겨진오징어	22.07.23	971	2
34745	미니	픽셀 써보고 싶긴 한데 AP가 구려도 너무 구리네요 [9]	PatGelsinger	22.08.04	971	6
34744	미니	뻘짓연구소 채널 샤오미 믹스 폴드2 예고... [8]	Niflheimr	22.08.31	971	5
34743	미니	교보가 갑자기 sam 이북리더를 발표했네요?(with wacom) [10]	스퀴니	22.09.13	971	3
34742	미니	스타링크가 또 한 번 위력을 발휘하는군요 [1]	[성공]함께크는성장	22.09.25	971	4
34741	미니	퀄컴이 삼파한테 맡길 칩이 [8]	1q2w3e4r!	22.11.16	971	0
34740	미니	스냅8 gen2 + ufs4.0 조합이라면 [2]	출사표	22.11.22	971	5
34739	미니	A33 vs S20 vs S22U 야간 모드 비교 [4]	흡혈귀왕	22.12.07	971	10
34738	미니	s23 플러스 8기가램에 140만원이요...? [6]	크나앙	23.01.14	971	7
34737	미니	이번에 스냅8g2 가격 살벌하지 않을까 싶은데요 [9]	1q2w3e4r!	23.01.17	971	9
34736	미니	근데 S23 울트라는 정말 거의 플랫에 근접해지긴 했어요 [6]	Niflheimr	23.02.04	971	0
34735	미니	5G를 이젠 써야할지 고민되네유 [17]	민초홀릭	23.03.17	971	1
34734	미니	현카는 EMV 수수료 문제를 어떻게 해결한 건지 궁금하네요 [13]	Geronimo	23.03.21	971	1
34733	미니	샤오미 13 울트라도 가변 조리개 들어간거보니... [15]	흡혈귀왕	23.04.11	971	5
34732	미니	고가형 스마트폰 디스플레이가 계속 밝아지고 있습니다. [4]	요트맨	23.04.15	971	1
34731	미니	S23 좋네요. [7]	카본블랙	23.05.27	971	2
34730	미니	개인적으로 바라는 갤럭시 디자인 변화... [12]	soboru	23.07.24	971	5
34729	미니	이 삼성 로고(?)는 처음 보는데! [4]	맛폰은디지바이스	23.07.28	971	3
34728	미니	OneUI6에서 카메라 고화소 전환 UX 개선 요청했습니다. [4]	흡혈귀왕	23.08.17	971	10
34727	미니	S24 Qi2는 안 들어가는 걸까요? [9]	MrGom™	23.08.28	971	1
34726	미니	근데 솔라베이 한정에선 2400이 8G3보다 높을수도 ㅋㅋ [4]	흡혈귀왕	23.10.26	971	5
34725	미니	A18 프로는 CPU 코어 수 증가, GPU는 아키텍쳐 최적화와 메모리대역폭 개선에 기대를.... [3]	dlwlrma	23.11.01	971	0
34724	미니	S24 시리즈는 약간 과도기 느낌이긴하네여 [9]	흡혈귀왕	23.12.01	971	2

👩🏼‍💻미코☀️

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정