로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

HSC

미니 비전프로의 오클루전 성능

  • HSC
  • 조회 수 995
  • 2023.12.23. 02:07

 

 

초록색 점은 핸드트래킹 지점입니다.

 

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

 

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

 

성능이 누끼따는건 매우 좋아보이는데

 

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

 

이부분은 현재 베타니 개선될 여지가 있습니다.

 

댓글
7
김치피자탕수육이좋다
1등 김치피자탕수육이좋다
2023.12.23. 02:13

 

 

성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:26

이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요

 

비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)

 

뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요

 

퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

[HSC]님의 댓글을 신고합니다. 취소 신고
김치피자탕수육이좋다
김치피자탕수육이좋다 HSC 님께
2023.12.23. 02:54

아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.27. 22:48

아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서

 

저렇게 구현할수는 있겠네요 ㅋㅋㅋ

[HSC]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:30

현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.

 

왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요

 

 

[HSC]님의 댓글을 신고합니다. 취소 신고
2등 Eomjunsik
2023.12.23. 05:08

다들 기술력이 정말 대단하네요.

"고작" M2 정도 연산 능력으로 저 처리를..

[Eomjunsik]님의 댓글을 신고합니다. 취소 신고
노멀라이즈
3등 노멀라이즈
2023.12.23. 10:14

https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer

그냥 모바일에서도 충분히 됩니다.

이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.

이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 

혹시나 해서 추가 합니다.

z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.

다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

[노멀라이즈]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 240809 수정 file admin 18.08.04 120091 13
핫글 미니 3년만에 기변이네요 [3] file 도저히못참겠다 24.09.28 833 15
핫글 미니 아이폰 16 프맥 원신 구동도 15 프맥보다 훨씬 개선되었다네요. [3] 요트맨 24.09.28 943 8
핫글 미니 아이폰16의 Wifi7도 반쪽짜리...군요... [11] Stellist 24.09.28 1264 8
219427 미니 태블릿... 사용중인 인치수 투표 결과.jpg file Niflheimr 00:46 155 1
219426 미니 갤럭시가 나아가야 할 카메라 방향타 6 (Pixel 9Pro 50MP) [1] updatefile S.R 00:35 117 3
219425 미니 보통 Vulkan, Metal, DX12 성능 개선이 [4] file 흡혈귀왕 00:09 224 2
219424 미니 그래핀OS가 뭔가 싶어서 봤는데 [9] [성공]함께크는성장 24.09.28 620 6
219423 미니 갤펌)8gen4 전성비관련(스타레일) [8] file 알몬드오일 24.09.28 688 5
219422 미니 안드진영에선 metalFx같은 ai업스케일을 제공못하나요? [14] update eg00 24.09.28 442 4
219421 미니 녹스 좀 없애주면 좋겠네요 [42] 스이공 24.09.28 919 1
219420 미니 BOE가 소송서 지면 타격 크겠는데요 [7] 갠냑시 24.09.28 904 4
219419 미니 루머: 갤럭시 탭 S10 FE+ 감지 [16] Section31 24.09.28 861 2
219418 미니 안드탭 redmagic nova 디게좋네요? [2] file LTE 24.09.28 511 5
219417 미니 삼성 SRA(MX), CPU 마이크로아키텍처 및 모델링 [14] file Aimyon 24.09.28 789 1
219416 미니 식사후 예쁜카페~ ft.지캠 file pietoro 24.09.28 215 2
219415 미니 아이폰 16 프맥 원신 구동도 15 프맥보다 훨씬 개선되었다네요. [3] 요트맨 24.09.28 943 8
219414 미니 mobox로 스냅드래곤 Gen3 에서 구동된 검은 신화 오공 [3] 흡혈귀왕 24.09.28 609 6
219413 미니 S24 FE 무게가 아쉽네요 [18] 프로입털러 24.09.28 827 4
219412 미니 3년만에 기변이네요 [3] file 도저히못참겠다 24.09.28 833 15
219411 미니 갤럭시링 체험하고 왔슈 [4] 닉포토 24.09.28 529 1
219410 미니 oryon 코어 성과가 확실히 있긴 하네요. [4] file gamma 24.09.28 927 4
219409 미니 비보에서 새로운 기술의 BOE 디스플레이를 탑재한다네요 [1] file choijm0715 24.09.28 856 5
219408 미니 삼브 베타 27.0.0.63 [1] file [성공]함께크는성장 24.09.28 348 3
219407 미니 애플워치 보증기간 관련 질문드립니다 [3] file 쿼드쿼드 24.09.28 223 1
219406 미니 아이폰+갤워치 조합 의외로 좋네요 [2] 시엠 24.09.28 656 4
219405 미니 갤워치 쓰면 쓸수록 진동이 너무 아쉽습니다 [8] HQteam 24.09.28 651 7
219404 미니 워치 울트라로 바꾸고 나니 샤오미가 웨어OS 4를 주는군요.. [6] file 웽웽 24.09.28 752 2
219403 미니 파운드리적자 주력사업 메모리부진..? [7] S27울트라존버 24.09.28 935 6

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

확장 변수

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.