로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

AquStar

미니 벤치마크 점수로 불량을 산정하면 안되는 이유들에 대해서

  • AquStar
  • 조회 수 1140
  • 2023.10.17. 16:11

모든 소비자가 특정 제품을 구매할 때 그에 대한 최고의 만족도를 원하는건 변하지 않는 사실입니다.

단차나, 마감의 품질, 올바른 성능 등 다양한 부분에서 지불한 가치 대비 특정한 목표를 원하죠.

 

그리고 전자기기 부분에서 칩 성능을 사용자 기준에서

가장 간편하게 눈으로 볼 수 있는건 "유명한 서드파티 벤치마크 프로그램의 결과값" 이 될겁니다.

 

여기서 분명히 해야할 부분은 그런 벤치마크 프로그램을 특정 제조사가 단독으로 공인해서는 안된다는 것입니다.

긱벤치는 모바일 환경에서 가장 대표적으로 인용되는 멀티플랫폼 CPU벤치마크 어플리케이션임에는 분명하지만 이러한 프로그램을 특정 제조사에서 공인해버리면 벤치마크의 신뢰도는 누가 보장해주죠?

 

특정 제조사가 해당 벤치마크를 공인했기 때문에 특정 제조사에서 더 점수가 높게 나올 수 있다

라는 의혹에서 벗어날 수 있나요?

 

그래서 미국에서는 SPEC 이라는 기업집합의 공인 비영리 단체가 보증해주는 벤치마크가 있습니다.

그런데 그거, 일반 소비자용 프로그램이 아니죠, 라이센스 하나에 천달러인데요,

 

결국 소비자는 무료 서드파티 벤치마크 테스트로 기기의 최대성능을 평가할 수 밖에 없습니다.

 

 

geekbench5-logo2-100809947-orig.jpg

 

그렇다면 이 벤치마크 어플리케이션은 우리의 칩셋이 불량이라고 판단할 수 있을까요?

애당초 불량의 기준이 뭐죠?

 

누군 싱글 점수가 3000점이 나왔는데 내 기기는 2800점이 나왔으니 200점 만큼 불량이다?

몇점 부터 불량이라고 판단할까요? 벤치마크가 돌아가는 현실 온도는요?

백그라운드 프로그램으로 인한 부하 분할로 인한 점수 하락은?

벤치마크를 돌리기 전 한참동안 게임을 하다가 온도가 충분히 올라간 상태에서 돌려서 스로틀링이 걸린 상태라면?

 

칩의 성능을 단순히 벤치마크 점수로만 서비스센터에서 보장해줄 정도라면 객관적으로 기기를 초기화한 뒤 벤치마크 어플리케이션만 설치하고 모든 백그라운드를 강제로 중지한 뒤 최대한 안정적인 온도에서 테스트를 진행해 사용자에게 확인시켰을 때 만족스러운 점수가 아니면 불량판정입니까?

 

만약 이런 일이 발생한다면 점수가 낮은 기기는 모두 불량인 셈이 되니 긱벤치 기기 평균 점수가 확 올라가겠네요, 그러면 평균점수가 올라가고 그럼 더 많은 제품들이 점수가 낮다며 불량취급을 받겠네요 이게 맞나요?

 

 

2312123123.png

 

이어서 벤치마크 점수가 현실을 대변하는가?

물론 모든 칩은 제조사의 내부 테스트를 거친 뒤 출하됩니다. 하지만 모든 칩이 균일하진 않죠

특정 칩은 다른 칩들에 비해 좀 더 전력제한이 널널하거나, 혹은 빡빡할 수 있습니다.

 

그 차이는 소비자들이 체감할 수 있는 정도는 분명 아니지만 극단적인 사례를 들어보겠습니다.

 

위 그래프에서 A와 B칩이 있습니다. 벤치마크 테스트를 진행하면 B칩의 점수가 더 높게 나오네요

그럼 A칩은 불량인가요? 하지만 스마트폰의 칩셋이 대부분 사용하는 저전력구간에서는 B칩셋보다 더 높은 전성비가 나오는데요? B칩은 최고점수는 높지만 저전력 구간에서의 성능은 더 낮네요?

 

물론 실제 칩은 이렇게 극단적으로 차이나진 않습니다.

 

하지만

이런거 벤치마크 테스트 앱이 알려줍니까?

소비자가 클럭 구간별, 코어별 소비전력을 알 수 있나요?

 

소비자 입장에서 서비스 센터를 방문해 벤치마크를 통해 불평할 수 있는건 기껏해야

"한번 이상이 없는지 확인좀 해주세요" 정도지 벤치마크 결과가 낮으니 대처해주세요가 아닙니다.

 

 

planSnsBanner6501.jpg

 

이어서 모바일 시대로 와 뿔딱의 단어가 변경된 것에 대해

뿔딱이라는 단어는 조립PC에 있어서 전압 마진폭이 널널하게 출하된 제품에 한해

오버클럭이 얼마나 잘먹냐, 국민오버라고 부르는 단계까지도 오버클럭이 되지 않는 제품들에 한해

뿔딱이라는 단어를 붙인것을 기원으로 합니다.

 

그런데 오버클럭이란 단어부터 제조사가 권장하는 상황은 아니죠

즉 동작 자체가 되지 않는 초기불량을 제외한 모든 제품은 정상제품으로 출고가 된 상태이며,

오버가 안먹는다고 불량이 아닙니다.

 

그렇다면 소비자가 오버클럭을 할 수 없는 모든 스마트폰 칩셋에는 말 그대로 뿔딱은 존재하지 않는 셈이죠,

아니 오히려 갤럭시용 스냅드래곤 8 Gen 2 처럼 제조사가 공인된 오버클럭 제품을 탑재했다는건

반대로 모든 제품이 뿔딱이 아닌 것이라고 공인한 셈입니다.

 

 

Snapdragon-8-Gen-2-1.jpg

 

벤치마크 점수가 낮은건 결코 불량의 사유가 될 수 없습니다.

내 칩셋이 불량같다? 보통 그러면 기기가 작동을 안하지 단순히 점수가 낮은 정도로 끝나지 않습니다.

 

서드파티 벤치마크 신뢰성에 대한 문제, 벤치마크 테스트가 진행되는 스마트폰 자체 혹은 외부 환경

단순히 벤치마크 점수가 알려주지 않는 것들,

 

이러한 모든 원인을 제쳐두고 벤치마크 점수에 대한 일차원적 신봉은 잠시 미뤄두시길 바랍니다.

댓글
5
나르자
1등 나르자
2023.10.17. 16:47

뭐.. 다른건 논외로 치고

뿔딱은, 의미 확장이라는 개념으로 받아들여도 될것이라고 생각합니다.

[나르자]님의 댓글을 신고합니다. 취소 신고
흰하나
best 3등 흰하나
2023.10.17. 17:55

그래도 이런 좋은글이 쓰여졌으니 그 논란의 글도 마냥 의미없진 않네요ㅋㅋ

[흰하나]님의 댓글을 신고합니다. 취소 신고
포인트봇
포인트봇 흰하나 님께
2023.10.17. 17:55
회원님 2포인트 채굴 성공!
[포인트봇]님의 댓글을 신고합니다. 취소 신고
demi
demi
2023.10.17. 18:36

현재의 서드파티 벤치마킹 툴은 완벽한 변인통제가 불가능하기에 애초에 불량판정의 기준이 될 수 없죠. 매우 특정한 상황에서의 순간최고성능만 체크하는 툴이 거의 대부분이고(그나마 스트레스 테스트가 좀 더 새로운 인사이트를 주긴 하죠), 벤치마크 자체도 100%까지는 신뢰할 수가 없지요. 온도가 아니라 다른 요소까지 성능에 영향을 주는 경우가 되면 더 어렵구요. 공정 자체도 기기편차의 가능성을 내포하고 있고, 생산의 모든 변인을 통제한다 해도 결과물이 완전히 같을 것 같지는 않네요.

[demi]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 230228 수정 file admin 18.08.04 113988 13
핫글 미니 오로라 관측하고 왔습니다 (feat. 23U) [8] file Badger 24.05.11 468 17
핫글 미니 Honor "우리는 화웨이와 다른 기업이다" [10] file AquStar 24.05.11 906 15
핫글 미니 중국 장가계 입니다 (S23U) [10] file 나랏미 24.05.11 650 14
213392 미니 배터리 관련 오늘의 희소식 [1] BarryWhite 18.07.02 215 0
213391 미니 오늘자 외신 모음 [3] BarryWhite 18.07.05 160 0
213390 미니 삼성 갤럭시 시리즈 펌웨어 버전 확인방법 [1] 눈팅킹 18.07.07 351 0
213389 미니 프로듀서DK : 소니 오픈형 코드리스 이어폰 리뷰 [1] BarryWhite 18.07.07 258 0
213388 미니 엑시노스 9810이 아무리 게임 성능이 나아졌다고는 하지만 [3] 눈팅킹 18.07.08 322 0
213387 미니 삼성 펌웨어 다운로드 받는 방법 [1] 눈팅킹 18.07.09 275 0
213386 미니 4K 모니터 장만 하려는데... [4] BarryWhite 18.07.09 130 0
213385 미니 서피스 고는 음...... [1] BarryWhite 18.07.10 119 0
213384 미니 갤럭시탭 S4 블랙 + 키보드 케이스 사진 [1] file BarryWhite 18.07.11 219 0
213383 미니 갤8 갤8플 업데이트 있습니다 [2] file 눈팅킹 18.07.12 103 0
213382 미니 갤럭시 전통시장 에디션 [2] file 눈팅킹 18.07.13 202 0
213381 미니 프로듀서DK : 6만원대 가성비 끝판왕 스마트워치 [1] BarryWhite 18.07.14 162 0
213380 미니 안드로이드 태블릿 끝판왕 [2] 눈팅킹 18.07.14 165 0
213379 미니 삼성 디자인의 흥망성쇠 file 눈팅킹 18.07.15 175 0
213378 미니 갤럭시 스마트폰 기초 최적화 셋팅방법 [2] file 눈팅킹 18.07.15 3507 0
213377 미니 갤s9 GPU가 갤8보다 떨어진다는데 왜 검은사막에서 최고옵션튼 갤9만 지원하나요? [1] 눈팅킹 18.07.15 178 0
213376 미니 아이패드 프로 10.5 손절할 예정입니다. [8] 눈팅킹 18.07.16 233 0
213375 미니 노트9 유출 [1] file BarryWhite 18.07.16 243 0
213374 미니 iOS12 개발자 베타 OTA로 받아보기(프로파일) file 눈팅킹 18.07.16 145 0
213373 미니 애플, iOS12 개발자 베타 4 버전 릴리즈 file 눈팅킹 18.07.18 102 0
213372 미니 자작) GALAXY NOTE 9 MODELING [1] file GalaxyFold 18.07.20 184 0
213371 미니 안드로이드 disabled 처리된 시스템앱 able로 바꿀 수 있을까요? [4] BarryWhite 18.07.20 158 0
213370 미니 자작) GALAXY NOTE 9 RENDERING 첫번째! [2] file GalaxyFold 18.07.21 225 0
213369 미니 미노트3 게이밍 성능 [2] file 왕코 18.07.25 178 0
213368 미니 미박스3 오레오 업데이트 했다가 피봤네요. [1] BarryWhite 18.07.25 879 0

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...