로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

AquStar

미니 벤치마크 점수로 불량을 산정하면 안되는 이유들에 대해서

  • AquStar
  • 조회 수 1153
  • 2023.10.17. 16:11

모든 소비자가 특정 제품을 구매할 때 그에 대한 최고의 만족도를 원하는건 변하지 않는 사실입니다.

단차나, 마감의 품질, 올바른 성능 등 다양한 부분에서 지불한 가치 대비 특정한 목표를 원하죠.

 

그리고 전자기기 부분에서 칩 성능을 사용자 기준에서

가장 간편하게 눈으로 볼 수 있는건 "유명한 서드파티 벤치마크 프로그램의 결과값" 이 될겁니다.

 

여기서 분명히 해야할 부분은 그런 벤치마크 프로그램을 특정 제조사가 단독으로 공인해서는 안된다는 것입니다.

긱벤치는 모바일 환경에서 가장 대표적으로 인용되는 멀티플랫폼 CPU벤치마크 어플리케이션임에는 분명하지만 이러한 프로그램을 특정 제조사에서 공인해버리면 벤치마크의 신뢰도는 누가 보장해주죠?

 

특정 제조사가 해당 벤치마크를 공인했기 때문에 특정 제조사에서 더 점수가 높게 나올 수 있다

라는 의혹에서 벗어날 수 있나요?

 

그래서 미국에서는 SPEC 이라는 기업집합의 공인 비영리 단체가 보증해주는 벤치마크가 있습니다.

그런데 그거, 일반 소비자용 프로그램이 아니죠, 라이센스 하나에 천달러인데요,

 

결국 소비자는 무료 서드파티 벤치마크 테스트로 기기의 최대성능을 평가할 수 밖에 없습니다.

 

 

geekbench5-logo2-100809947-orig.jpg

 

그렇다면 이 벤치마크 어플리케이션은 우리의 칩셋이 불량이라고 판단할 수 있을까요?

애당초 불량의 기준이 뭐죠?

 

누군 싱글 점수가 3000점이 나왔는데 내 기기는 2800점이 나왔으니 200점 만큼 불량이다?

몇점 부터 불량이라고 판단할까요? 벤치마크가 돌아가는 현실 온도는요?

백그라운드 프로그램으로 인한 부하 분할로 인한 점수 하락은?

벤치마크를 돌리기 전 한참동안 게임을 하다가 온도가 충분히 올라간 상태에서 돌려서 스로틀링이 걸린 상태라면?

 

칩의 성능을 단순히 벤치마크 점수로만 서비스센터에서 보장해줄 정도라면 객관적으로 기기를 초기화한 뒤 벤치마크 어플리케이션만 설치하고 모든 백그라운드를 강제로 중지한 뒤 최대한 안정적인 온도에서 테스트를 진행해 사용자에게 확인시켰을 때 만족스러운 점수가 아니면 불량판정입니까?

 

만약 이런 일이 발생한다면 점수가 낮은 기기는 모두 불량인 셈이 되니 긱벤치 기기 평균 점수가 확 올라가겠네요, 그러면 평균점수가 올라가고 그럼 더 많은 제품들이 점수가 낮다며 불량취급을 받겠네요 이게 맞나요?

 

 

2312123123.png

 

이어서 벤치마크 점수가 현실을 대변하는가?

물론 모든 칩은 제조사의 내부 테스트를 거친 뒤 출하됩니다. 하지만 모든 칩이 균일하진 않죠

특정 칩은 다른 칩들에 비해 좀 더 전력제한이 널널하거나, 혹은 빡빡할 수 있습니다.

 

그 차이는 소비자들이 체감할 수 있는 정도는 분명 아니지만 극단적인 사례를 들어보겠습니다.

 

위 그래프에서 A와 B칩이 있습니다. 벤치마크 테스트를 진행하면 B칩의 점수가 더 높게 나오네요

그럼 A칩은 불량인가요? 하지만 스마트폰의 칩셋이 대부분 사용하는 저전력구간에서는 B칩셋보다 더 높은 전성비가 나오는데요? B칩은 최고점수는 높지만 저전력 구간에서의 성능은 더 낮네요?

 

물론 실제 칩은 이렇게 극단적으로 차이나진 않습니다.

 

하지만

이런거 벤치마크 테스트 앱이 알려줍니까?

소비자가 클럭 구간별, 코어별 소비전력을 알 수 있나요?

 

소비자 입장에서 서비스 센터를 방문해 벤치마크를 통해 불평할 수 있는건 기껏해야

"한번 이상이 없는지 확인좀 해주세요" 정도지 벤치마크 결과가 낮으니 대처해주세요가 아닙니다.

 

 

planSnsBanner6501.jpg

 

이어서 모바일 시대로 와 뿔딱의 단어가 변경된 것에 대해

뿔딱이라는 단어는 조립PC에 있어서 전압 마진폭이 널널하게 출하된 제품에 한해

오버클럭이 얼마나 잘먹냐, 국민오버라고 부르는 단계까지도 오버클럭이 되지 않는 제품들에 한해

뿔딱이라는 단어를 붙인것을 기원으로 합니다.

 

그런데 오버클럭이란 단어부터 제조사가 권장하는 상황은 아니죠

즉 동작 자체가 되지 않는 초기불량을 제외한 모든 제품은 정상제품으로 출고가 된 상태이며,

오버가 안먹는다고 불량이 아닙니다.

 

그렇다면 소비자가 오버클럭을 할 수 없는 모든 스마트폰 칩셋에는 말 그대로 뿔딱은 존재하지 않는 셈이죠,

아니 오히려 갤럭시용 스냅드래곤 8 Gen 2 처럼 제조사가 공인된 오버클럭 제품을 탑재했다는건

반대로 모든 제품이 뿔딱이 아닌 것이라고 공인한 셈입니다.

 

 

Snapdragon-8-Gen-2-1.jpg

 

벤치마크 점수가 낮은건 결코 불량의 사유가 될 수 없습니다.

내 칩셋이 불량같다? 보통 그러면 기기가 작동을 안하지 단순히 점수가 낮은 정도로 끝나지 않습니다.

 

서드파티 벤치마크 신뢰성에 대한 문제, 벤치마크 테스트가 진행되는 스마트폰 자체 혹은 외부 환경

단순히 벤치마크 점수가 알려주지 않는 것들,

 

이러한 모든 원인을 제쳐두고 벤치마크 점수에 대한 일차원적 신봉은 잠시 미뤄두시길 바랍니다.

댓글
5
나르자
1등 나르자
2023.10.17. 16:47

뭐.. 다른건 논외로 치고

뿔딱은, 의미 확장이라는 개념으로 받아들여도 될것이라고 생각합니다.

[나르자]님의 댓글을 신고합니다. 취소 신고
흰하나
best 3등 흰하나
2023.10.17. 17:55

그래도 이런 좋은글이 쓰여졌으니 그 논란의 글도 마냥 의미없진 않네요ㅋㅋ

[흰하나]님의 댓글을 신고합니다. 취소 신고
포인트봇
포인트봇 흰하나 님께
2023.10.17. 17:55
회원님 2포인트 채굴 성공!
[포인트봇]님의 댓글을 신고합니다. 취소 신고
demi
demi
2023.10.17. 18:36

현재의 서드파티 벤치마킹 툴은 완벽한 변인통제가 불가능하기에 애초에 불량판정의 기준이 될 수 없죠. 매우 특정한 상황에서의 순간최고성능만 체크하는 툴이 거의 대부분이고(그나마 스트레스 테스트가 좀 더 새로운 인사이트를 주긴 하죠), 벤치마크 자체도 100%까지는 신뢰할 수가 없지요. 온도가 아니라 다른 요소까지 성능에 영향을 주는 경우가 되면 더 어렵구요. 공정 자체도 기기편차의 가능성을 내포하고 있고, 생산의 모든 변인을 통제한다 해도 결과물이 완전히 같을 것 같지는 않네요.

[demi]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 240809 수정 file admin 18.08.04 117865 13
핫글 미니 폴드6는 너무 아재아재 하네요 [11] file 카더 24.08.14 1241 18
핫글 미니 아이폰 SE4 500달러 정도부터 시작한다는 말도 나오던데 [18] KIKIRAKA 24.08.14 895 17
핫글 미니 미코에서는 픽셀 인기가 거의 없는거 같아 영상 올려요. [21] update niotree 24.08.14 1022 9
23579 미니 T전화쓰십니까? 삼성기본전화 쓰십니까? [18] 트릴리언 24.04.01 1136 0
23578 미니 핏3 이거 데이터 동기화에 문제가 많네요 [5] file 긴닉네임24643649 24.04.28 1136 5
23577 미니 애플 아직도 이 버릇 못 고쳤네요 [4] file Alternative 24.05.08 1136 6
23576 미니 Galaxy Book 4 Edge Pro [11] file 늅늅 24.05.18 1136 2
23575 미니 인앱 브라우저의 강제화가 싫습니다 [5] 레쓰비 24.07.19 1136 19
23574 미니 논글레어패널 모니터 액정클리너로 닦아도 되나요?? [3] 기븐 19.04.14 1137 0
23573 미니 삼성 기술력이 이정도 였나요 [8] file qazsdf 19.09.16 1137 0
23572 미니 지문 패치 더 망한건가요? [20] 브니엘 19.10.23 1137 0
23571 미니 요즘 폰 회사들 쌍으로 미쳐가는군요 [20] file LG알바 19.12.03 1137 0
23570 미니 외장 HDD 8TB도 구매했습니다 돈 음청깨졌네요 [1] file 흡혈귀왕 20.01.28 1137 0
23569 미니 아이패드 프로 4세대 12.9 셀룰러 1테라 사서 반 년만 쓰고 [21] 한마루 20.03.21 1137 0
23568 미니 S20+ 폰 온도 40°C 넘으면 120hz 안되는거 맞나보네요. [6] 냥냥18세 20.06.01 1137 1
23567 미니 삼성TV는 무거운데 가져가는군요 [21] file AGRS 20.06.01 1137 4
23566 미니 찌라시)퀄컴의 차기 스냅드래곤 875 납품 가격?  [23] 존버합니다 20.06.27 1137 0
23565 미니 루머) 노트20 및 폴드2 추정 가격 [17] file L.Elwin 20.07.04 1137 3
23564 미니 오포 125w 충전 체감하기.gif [17] file choijm0715 20.08.01 1137 0
23563 미니 스냅드래곤865와 A13의 전성비 차이는 어느정도인가요? [3] 청정수 20.09.21 1137 0
23562 미니 FE 민트는 실기를 꼭 보세요 [21] file 마키세크리스 20.10.09 1137 5
23561 미니 [단독] 삼성전자, 내년 6월 S펜 장착한 갤럭시Z 폴드3 출시... 노트는 단종 [26] 레제르바 20.11.23 1137 5
23560 미니 S21 렌더링 비교 [29] file 브니엘 20.12.01 1137 0
23559 미니 오토스위치 기능 확대지원 [11] file 크루원 21.01.21 1137 11
23558 미니 엄청 혜자였던 s21 사전예약 정산 [2] 인헤리턴스 21.03.01 1137 0
23557 미니 루머)AMD 반고흐가 곧 찾아온다. 7nm공정에 RDNA2 GPU 코어 탑재 [4] 스퀴니 21.04.17 1137 1
23556 미니 삼성은 돈을 안 쓰려고 해서 문제에요 [25] Hoshizora 21.05.04 1137 16
23555 미니 ROG 5 vs S21U 와일드 라이프 스트레스 테스트 [7] file 배붕이 21.05.26 1137 2

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...