미니 비전프로의 오클루전 성능

HSC
조회 수 984
2023.12.23. 02:07

초록색 점은 핸드트래킹 지점입니다.

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

성능이 누끼따는건 매우 좋아보이는데

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

이부분은 현재 베타니 개선될 여지가 있습니다.

		7
								
1등김치피자탕수육이좋다
									2023.12.23. 02:13									
 
성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:26									
이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요
 
비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)
 
뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요
 
퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
김치피자탕수육이좋다
										 HSC 님께
				
									2023.12.23. 02:54									
아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

					[김치피자탕수육이좋다]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.27. 22:48									
아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서
 
저렇게 구현할수는 있겠네요 ㅋㅋㅋ

					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
글쓴이HSC
										 김치피자탕수육이좋다 님께
				
									2023.12.23. 02:30									
현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.
 
왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요
 
					 1
									
					[HSC]님의 댓글을 신고합니다.
					취소
					신고
					
2등Eomjunsik
									2023.12.23. 05:08									
다들 기술력이 정말 대단하네요.
"고작" M2 정도 연산 능력으로 저 처리를..

					[Eomjunsik]님의 댓글을 신고합니다.
					취소
					신고
					
3등노멀라이즈
									2023.12.23. 10:14									
https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer
그냥 모바일에서도 충분히 됩니다.
이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.
이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 
혹시나 해서 추가 합니다.
z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.
다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

					 3
									
					[노멀라이즈]님의 댓글을 신고합니다.
					취소
					신고

에디터로 글쓰기

번호	분류	제목	글쓴이	날짜	조회 수
공지	공지	사이트 이용 수칙 230228 수정	admin	18.08.04	116878	13
핫글	미니	엑시노스 W1000 나름 기념비적인게 [10]	흡혈귀왕	14:06	1120	20
핫글	미니	엑시 W1000 성능 30% 향상은 대체 누가 퍼트렸을까요 ㅋㅋ [23]	흡혈귀왕	13:43	1172	12
핫글	미니	엑시노스 W1000 공개 [11]	노다	13:27	1209	10
205504	미니	갤텐 암만봐도 초록색감이 강한데.. 다른분들은 안그렇나요? [8]	기븐	19.03.13	318	0
205503	미니	구글, 자사 랩탑 및 태블릿 하드웨어 부문 다운사이징 하고 있어 [1]	다잊어야해욥	19.03.13	118	1
205502	미니	“5G 시대 모바일 보안 걱정마세요” 삼성전자, AI 머신러닝 보안 도입 [1]	다잊어야해욥	19.03.13	146	0
205501	미니	저사양 게임용으로 노트4랑 G3중 뭐가 더 낫나요? [6]	Senmu	19.03.13	132	0
205500	미니	s10 디스플레이가 이전작 디스플레이들보다 채도가 확 내려갔죠. [13]	Ophelia	19.03.13	468	0
205499	미니	패키지 글 보니까 갤투 패키지가 생각나네요 [3]	솔리드	19.03.13	168	0
205498	미니	빅스비 업데이트있네요 [2]	Chrop	19.03.13	303	0
205497	미니	S10 사은품 버즈말고 나머지는 언제 오나요? [8]	Angry	19.03.13	221	0
205496	미니	저는 의외로 버즈가 빨리 오겠군요. [1]	갤9플스	19.03.13	130	0
205495	미니	십오짐 출시일은 9일 입니다 [6]	숲속의참치	19.03.13	167	0
205494	미니	ADB 백업이 계속 안되는데 혹시 아시는분 있으신지? [9]	기븐	19.03.13	875	0
205493	미니	헤일로: 마스터치프 콜렉션, 리치 추가 및 PC판 출시 발표 [1]	비온날흙비린내	19.03.13	87	0
205492	미니	3사의 S10개통자 중 5G 수퍼찬스 가입자 비율은 18~25% [6]	aleji	19.03.13	224	0
205491	미니	십오짐 4월 9일 출시 ㄷㄷ [2]	숲속의참치	19.03.13	284	0
205490	미니	와 유튜브 어드밴스드 앱 뭐죠 ㄷㄷㄷㄷㄷ [23]	숲속의참치	19.03.13	16787	1
205489	미니	찌라시)엘지 하반기 플래그쉽 준비중 [9]	다잊어야해욥	19.03.13	463	1
205488	미니	찌라시)갤럭시노트10은 총3가지 시료 [20]	다잊어야해욥	19.03.13	683	0
205487	미니	버즈 배송 [1]	슝이	19.03.13	185	0
205486	미니	색감조정 어플쓰세요 ㅎㅎ [2]	화이트멘솔	19.03.13	379	0
205485	미니	갤럭시s10 사진 프로모드 색감조정은 어떻게 하나요? [5]	닐멘	19.03.13	834	0
205484	미니	엘지가 반도체 파운드리를 아직 가지고 있었으면 지금과는 좀 달랐을까요? [9]	Ophelia	19.03.13	249	0
205483	미니	갤10과 갤오광 간단 비교 [23]	시릴라	19.03.13	505	0
205482	미니	이정도면 버즈 우수고객? [14]	SM-G955N_128GB	19.03.13	456	0
205481	미니	지금까지 지문인식 써본 결과 [7]	Ophelia	19.03.13	328	0
205480	미니	구형기기도 지문 인식 생각보다 빠릅니다 [7]	우리	19.03.13	244	0

👩🏼‍💻미코🌞

미니 비전프로의 오클루전 성능

추천 IT 소식 [1/]

스킨 기본정보

사용자 정의

1. 게시판 기본 설정

2. 글 목록

3. 갤러리 설정

4. 글 읽기 화면

5. 댓글 설정

6. 글 쓰기 화면 설정