로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

AquStar

미니 벤치마크 점수로 불량을 산정하면 안되는 이유들에 대해서

  • AquStar
  • 조회 수 1153
  • 2023.10.17. 16:11

모든 소비자가 특정 제품을 구매할 때 그에 대한 최고의 만족도를 원하는건 변하지 않는 사실입니다.

단차나, 마감의 품질, 올바른 성능 등 다양한 부분에서 지불한 가치 대비 특정한 목표를 원하죠.

 

그리고 전자기기 부분에서 칩 성능을 사용자 기준에서

가장 간편하게 눈으로 볼 수 있는건 "유명한 서드파티 벤치마크 프로그램의 결과값" 이 될겁니다.

 

여기서 분명히 해야할 부분은 그런 벤치마크 프로그램을 특정 제조사가 단독으로 공인해서는 안된다는 것입니다.

긱벤치는 모바일 환경에서 가장 대표적으로 인용되는 멀티플랫폼 CPU벤치마크 어플리케이션임에는 분명하지만 이러한 프로그램을 특정 제조사에서 공인해버리면 벤치마크의 신뢰도는 누가 보장해주죠?

 

특정 제조사가 해당 벤치마크를 공인했기 때문에 특정 제조사에서 더 점수가 높게 나올 수 있다

라는 의혹에서 벗어날 수 있나요?

 

그래서 미국에서는 SPEC 이라는 기업집합의 공인 비영리 단체가 보증해주는 벤치마크가 있습니다.

그런데 그거, 일반 소비자용 프로그램이 아니죠, 라이센스 하나에 천달러인데요,

 

결국 소비자는 무료 서드파티 벤치마크 테스트로 기기의 최대성능을 평가할 수 밖에 없습니다.

 

 

geekbench5-logo2-100809947-orig.jpg

 

그렇다면 이 벤치마크 어플리케이션은 우리의 칩셋이 불량이라고 판단할 수 있을까요?

애당초 불량의 기준이 뭐죠?

 

누군 싱글 점수가 3000점이 나왔는데 내 기기는 2800점이 나왔으니 200점 만큼 불량이다?

몇점 부터 불량이라고 판단할까요? 벤치마크가 돌아가는 현실 온도는요?

백그라운드 프로그램으로 인한 부하 분할로 인한 점수 하락은?

벤치마크를 돌리기 전 한참동안 게임을 하다가 온도가 충분히 올라간 상태에서 돌려서 스로틀링이 걸린 상태라면?

 

칩의 성능을 단순히 벤치마크 점수로만 서비스센터에서 보장해줄 정도라면 객관적으로 기기를 초기화한 뒤 벤치마크 어플리케이션만 설치하고 모든 백그라운드를 강제로 중지한 뒤 최대한 안정적인 온도에서 테스트를 진행해 사용자에게 확인시켰을 때 만족스러운 점수가 아니면 불량판정입니까?

 

만약 이런 일이 발생한다면 점수가 낮은 기기는 모두 불량인 셈이 되니 긱벤치 기기 평균 점수가 확 올라가겠네요, 그러면 평균점수가 올라가고 그럼 더 많은 제품들이 점수가 낮다며 불량취급을 받겠네요 이게 맞나요?

 

 

2312123123.png

 

이어서 벤치마크 점수가 현실을 대변하는가?

물론 모든 칩은 제조사의 내부 테스트를 거친 뒤 출하됩니다. 하지만 모든 칩이 균일하진 않죠

특정 칩은 다른 칩들에 비해 좀 더 전력제한이 널널하거나, 혹은 빡빡할 수 있습니다.

 

그 차이는 소비자들이 체감할 수 있는 정도는 분명 아니지만 극단적인 사례를 들어보겠습니다.

 

위 그래프에서 A와 B칩이 있습니다. 벤치마크 테스트를 진행하면 B칩의 점수가 더 높게 나오네요

그럼 A칩은 불량인가요? 하지만 스마트폰의 칩셋이 대부분 사용하는 저전력구간에서는 B칩셋보다 더 높은 전성비가 나오는데요? B칩은 최고점수는 높지만 저전력 구간에서의 성능은 더 낮네요?

 

물론 실제 칩은 이렇게 극단적으로 차이나진 않습니다.

 

하지만

이런거 벤치마크 테스트 앱이 알려줍니까?

소비자가 클럭 구간별, 코어별 소비전력을 알 수 있나요?

 

소비자 입장에서 서비스 센터를 방문해 벤치마크를 통해 불평할 수 있는건 기껏해야

"한번 이상이 없는지 확인좀 해주세요" 정도지 벤치마크 결과가 낮으니 대처해주세요가 아닙니다.

 

 

planSnsBanner6501.jpg

 

이어서 모바일 시대로 와 뿔딱의 단어가 변경된 것에 대해

뿔딱이라는 단어는 조립PC에 있어서 전압 마진폭이 널널하게 출하된 제품에 한해

오버클럭이 얼마나 잘먹냐, 국민오버라고 부르는 단계까지도 오버클럭이 되지 않는 제품들에 한해

뿔딱이라는 단어를 붙인것을 기원으로 합니다.

 

그런데 오버클럭이란 단어부터 제조사가 권장하는 상황은 아니죠

즉 동작 자체가 되지 않는 초기불량을 제외한 모든 제품은 정상제품으로 출고가 된 상태이며,

오버가 안먹는다고 불량이 아닙니다.

 

그렇다면 소비자가 오버클럭을 할 수 없는 모든 스마트폰 칩셋에는 말 그대로 뿔딱은 존재하지 않는 셈이죠,

아니 오히려 갤럭시용 스냅드래곤 8 Gen 2 처럼 제조사가 공인된 오버클럭 제품을 탑재했다는건

반대로 모든 제품이 뿔딱이 아닌 것이라고 공인한 셈입니다.

 

 

Snapdragon-8-Gen-2-1.jpg

 

벤치마크 점수가 낮은건 결코 불량의 사유가 될 수 없습니다.

내 칩셋이 불량같다? 보통 그러면 기기가 작동을 안하지 단순히 점수가 낮은 정도로 끝나지 않습니다.

 

서드파티 벤치마크 신뢰성에 대한 문제, 벤치마크 테스트가 진행되는 스마트폰 자체 혹은 외부 환경

단순히 벤치마크 점수가 알려주지 않는 것들,

 

이러한 모든 원인을 제쳐두고 벤치마크 점수에 대한 일차원적 신봉은 잠시 미뤄두시길 바랍니다.

댓글
5
나르자
1등 나르자
2023.10.17. 16:47

뭐.. 다른건 논외로 치고

뿔딱은, 의미 확장이라는 개념으로 받아들여도 될것이라고 생각합니다.

[나르자]님의 댓글을 신고합니다. 취소 신고
흰하나
best 3등 흰하나
2023.10.17. 17:55

그래도 이런 좋은글이 쓰여졌으니 그 논란의 글도 마냥 의미없진 않네요ㅋㅋ

[흰하나]님의 댓글을 신고합니다. 취소 신고
포인트봇
포인트봇 흰하나 님께
2023.10.17. 17:55
회원님 2포인트 채굴 성공!
[포인트봇]님의 댓글을 신고합니다. 취소 신고
demi
demi
2023.10.17. 18:36

현재의 서드파티 벤치마킹 툴은 완벽한 변인통제가 불가능하기에 애초에 불량판정의 기준이 될 수 없죠. 매우 특정한 상황에서의 순간최고성능만 체크하는 툴이 거의 대부분이고(그나마 스트레스 테스트가 좀 더 새로운 인사이트를 주긴 하죠), 벤치마크 자체도 100%까지는 신뢰할 수가 없지요. 온도가 아니라 다른 요소까지 성능에 영향을 주는 경우가 되면 더 어렵구요. 공정 자체도 기기편차의 가능성을 내포하고 있고, 생산의 모든 변인을 통제한다 해도 결과물이 완전히 같을 것 같지는 않네요.

[demi]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 230228 수정 file admin 18.08.04 117775 13
핫글 미니 삼페가 국내 NFC 보급이 미진한 거에 영향을 주긴 했다고 생각하는데 [14] update Niflheimr 11:21 751 20
핫글 미니 유튜브 16:9 화면 비율 계산기 입니다 (업데이트) [2] file RASBI 24.08.07 730 9
핫글 미니 대충 뇌 정상화가 이루어진 후의 폴드6 후기 [1] 가마 11:21 485 8
203104 미니 아이폰 무선충전은 더 빨라질 일 없으려나요? [3] Niflheimr 21.07.22 203 0
203103 미니 출시 시점에 민팃가격 변동 크나요? idsr 21.07.28 203 0
203102 미니 삿슈 file 닉포토 21.08.09 203 3
203101 미니 왓츠앱 해외에선 많이 쓰나요? [3] logend 21.08.11 203 1
203100 미니 폴드4 카메라 업글 기원합니다. [7] 흡혈귀왕 21.08.14 203 0
203099 미니 샀슈 [1] file 프로입털러 21.08.27 203 5
203098 미니 내장용량은 많으면좋죠 [3] file S22울트라존버 21.08.30 203 1
203097 미니 아이튠즈 정상 작동됩니다. [1] file 명신보감 21.09.27 203 4
203096 미니 방금 배송장번호 떴는데 이제 알려주는 건 뭔...ㅋㅋ [6] Havokrush 21.09.29 203 0
203095 미니 JVC도 디플 만드네요 선라이즈 21.10.01 203 1
203094 미니 '22년도 미미기기 계획 [4] 마키세크리스 21.11.08 203 5
203093 미니 엑시노스는 2월초에 공개하려나요? 걸리면하이킥 21.12.15 203 0
203092 미니 삼성닷컴 스트리밍 저만 이렇게 끊기는거죠....? [3] 폴드WithSpen 22.02.09 203 0
203091 미니 혹시나 해서 [3] file 워런티비오루 22.02.14 203 4
203090 미니 화이트냐그린이냐화이트냐그린이냐화이트냐그린이냐 [6] ESTETS 22.02.14 203 1
203089 미니 탭 S8 울트라 사고 싶었는데 Love헌터 22.02.15 203 4
203088 미니 울트라 신청했슈 file 워런티비오루 22.02.17 203 3
203087 미니 USB-C 단자 허브, 썬더볼트4 질문 [5] 우리 22.03.05 203 0
203086 미니 홈인증 file 알휙 22.03.22 203 0
203085 미니 기어s3 클래식 같은 형태가 전 좋더라고요 [1] [성공]함께크는성장 22.07.07 203 0
203084 미니 S22U 오늘자 음식샷 file 흡혈귀왕 22.08.19 203 2
203083 미니 번호이동 신청했는데 바뀌는 시점이 언젠가요? [8] Minny 22.08.22 203 0
203082 미니 폴드 커버 화면에서 보다 펼치면 버벅이는거 정상인가요 [1] 거꾸로보일러 22.09.08 203 1
203081 미니 저 칩셋 경쟁사 어디일까요 ㅂㅈㄷㄱㅅㅇ 22.09.08 203 0
203080 미니 ddr4 성능도 큰차이 없다면.. 라시드 22.09.28 203 0

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...