로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

HSC

미니 비전프로의 오클루전 성능

  • HSC
  • 조회 수 984
  • 2023.12.23. 02:07

 

 

초록색 점은 핸드트래킹 지점입니다.

 

실시간으로 손의 누끼만 따서 가상 그래픽과 뎁스를 일치화(가상 그래픽이 손에 가려지는 등)

 

원리는 외부 카메라랑 아이트레킹으로 손 인식해서 오브젝트 세그멘테이션 하는 겁니다.

 

성능이 누끼따는건 매우 좋아보이는데

 

핸드트래킹 200~300밀리 세컨드의 딜레이가 있어 퀘스트보다 느리다고 합니다.

 

이부분은 현재 베타니 개선될 여지가 있습니다.

 

댓글
7
김치피자탕수육이좋다
1등 김치피자탕수육이좋다
2023.12.23. 02:13

 

 

성능차이가있으니 누끼자체는 비전프로가 더잘따긴하군요

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:26

이건 누끼가 아니라 퀘스트의 뎁스 API라 아예달라요

 

비전프로는 손만 누끼다서 캡처해서 가상 그래픽위에 놓는거라면(포토샵 레이어 처럼)

 

뎁스 API는 현재 카메라에 찍힌 모든것의 깊이값을 AI가 추정하고 모든 사물이 깊이에 따라 상호작용하고 변화하는거에요

 

퀘스트3도 로컬에서 뎁스가 저정도로 돌아가는게 대단합니다.

[HSC]님의 댓글을 신고합니다. 취소 신고
김치피자탕수육이좋다
김치피자탕수육이좋다 HSC 님께
2023.12.23. 02:54

아 깊이인식기반으로 저부분만 누끼따는게아니라 걍 이미지기반누끼였군용

[김치피자탕수육이좋다]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.27. 22:48

아 근데 생각해보니 비전프로에도 라이다가 2개나 달려서

 

저렇게 구현할수는 있겠네요 ㅋㅋㅋ

[HSC]님의 댓글을 신고합니다. 취소 신고
HSC
글쓴이
HSC 김치피자탕수육이좋다 님께
2023.12.23. 02:30

현 비전프로의 방식이라면 결국 정육면체 가상 그래픽안에 손을 집어넣어 통과하거나 정육면체 뒤로 손을 가리는건 못합니다.

 

왜냐면 포토샵 레이어처럼 항상 맨위에 있으니까요

 

 

[HSC]님의 댓글을 신고합니다. 취소 신고
2등 Eomjunsik
2023.12.23. 05:08

다들 기술력이 정말 대단하네요.

"고작" M2 정도 연산 능력으로 저 처리를..

[Eomjunsik]님의 댓글을 신고합니다. 취소 신고
노멀라이즈
3등 노멀라이즈
2023.12.23. 10:14

https://mediapipe-studio.webapps.google.com/studio/demo/gesture_recognizer

그냥 모바일에서도 충분히 됩니다.

이거 실행하고 카메라 바꾸면 후면 카메라로도 되고요.

이것보다 더 발전한 핸드트래킹 알고리즘을 메타에서 이미 가지고 있고요. 

혹시나 해서 추가 합니다.

z값도 좌표에 포함되어 있습니다. 뭐 애초에 3d용도는 아닌지라 정확도는 알 수 없지만 구글이 못하지는 않을 거라고 보고요.

다년간 이쪽 업무를 본결과 인식계열은 구글이랑 메타가 탑입니다.

[노멀라이즈]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 230228 수정 file admin 18.08.04 117745 13
핫글 미니 폴드쓰면서 살짝 짜친다고 느낄때 [15] file GalaxyZFold5 24.08.05 1357 16
핫글 미니 iOS 18 DB5 [3] file 숨겨진오징어 03:00 708 9
핫글 미니 SD8G4 긱벤치에 대한 말들 [9] file 좌지우건 24.08.05 993 7
143801 미니 구글 픽셀8a 가격 유출? file BarryWhite 24.04.21 476 1
143800 미니 유튜브 프리미엄 유지하시는 분들, 어떻게 하시나요? [25] 숨겨진오징어 24.04.20 1495 1
143799 미니 폰 경량화대신 배터리 증가를 바라고 있습니다 [7] Chrop 24.04.20 675 1
143798 미니 루머를 바탕으로한 아이폰15와 16 비교 [5] file BarryWhite 24.04.20 957 1
143797 미니 Zen5 스트릭스 헤일로가 PS5 성능을 넘을 수도? [14] file BarryWhite 24.04.20 1697 1
143796 미니 삼성 갤럭시 F15도 8GB 램 탑재하네요. [2] file BarryWhite 24.04.20 575 1
143795 미니 모토엣지50울트라는 가격이좀세긴하네요 [1] S24울트라존버 24.04.19 469 1
143794 미니 컬러스케일 M3 Max 리뷰 범퀴 24.04.19 729 1
143793 미니 제4이통이 의외로 도움이 될 수도 있읍니다. [10] BarryWhite 24.04.19 824 1
143792 미니 S23 울트라 One UI 6.1 4월 보안패치 업뎃 이후로 배터리 타임이 좋아진 것 같습니다 [4] file Mate 24.04.19 990 1
143791 미니 갤럭시에 쓸만한 맥세이프 스티커 없을까요? [4] file 룬룬 24.04.19 838 1
143790 미니 페르소나 팬텀 15프로에서도 버벅이네요...ㅎㅎ [10] Ginza 24.04.19 782 1
143789 음향 마샬, 코드리스 이어폰 마이너4 국내 출시 [6] file BarryWhite 24.04.19 643 1
143788 음향 애플 비츠 솔로 4 Wireless 헤드폰 렌더링·가격 유출 [8] file BarryWhite 24.04.19 482 1
143787 미니 ARM 윈도우의 독점 기능은 'AI Explorer' ? [3] Butzed 24.04.19 554 1
143786 미니 원플러스12 긱벤치6 돌려봤습니다 [2] file Mint 24.04.19 311 1
143785 미니 Windows와 연결은 아직 문제가 많네요 file ′Ultra′ 24.04.18 348 1
143784 미니 S23 업데이트 하고 왔읍니다... [7] 익명 24.04.18 1064 1
143783 미니 갤럭시 Z 3세대 펌웨어 업데이트 file 운김 24.04.18 221 1
143782 미니 정발예정중인 외산폰중에 어떤모델이 기대가되사나요? [2] S24울트라존버 24.04.18 404 1
143781 미니 질문) 아이폰에서 구글 캘린더 쓰시는 분... MrGom™ 24.04.18 188 1
143780 미니 MS 입장에서 삼성과의 협업도 챙기긴 하겠지만 [6] [성공]함께크는성장 24.04.18 808 1
143779 미니 S23 플러스 다 좋은데 [4] 올챙떡국 24.04.18 906 1
143778 미니 갤럭시핏3 배터리 알다가도 모르겠네요 ㅋㅋㅋAOD로 5일가는데 [2] flair 24.04.18 1019 1
143777 미니 이정도쯤 해주면 전량 엑시노스라도 감지덕지 받아들일듯. [2] RuBisCO 24.04.18 1057 1

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...