미니 벤치마크 신뢰성에 대해서 어떻게 생각하십니까?(feat.긱벤치6)
- 도저히못참겠다
- 조회 수 787
- 2023.02.15. 15:36
벤치마크 툴에 어떤 방향성이나 편향성이 있다고
생각하지는 않습니다.
어떤 회사를 의도적으로 띄워줄 이유도 없거니와
그렇게 해서 얻을 이득도 크지 않겠죠.
벤치마크 툴은 벤치마크 툴 그 자체로 중립적이고
공정한 그저 어떤 규정과 같은 심사절차같은
역할만 하는 것이라고 저는 생각하고 있습니다.
하지만 모든 사람이 같은 생각을 할 수는 없듯이
이번 긱벤치6에 대해서도 가타부타 의문을 제기하는
분들도 있습니다.(미코 내부에선 없는거 같습니다.)
"원래 애플에 유리한 애플 쪽으로 편향된 회사였다"
"항상 신버전만 나오면 애플만 점수가 크게 오르고
타사는 손해를 봤던 것이 근거다"
"애플 실리콘에 대한 가중치가 늘어났기 때문"
이런 의견들에 대해서 동의하지는 않으나 어느 정도는
주장할 법한 의구심이라고는 생각합니다.
애플은 실제로 점수 이득을 보았고 바뀐 규정 중에
무엇에 의해 이런 결과가 생긴 것인지에 대해서
자세히 설명을 들은 적은 없으니까요.
선수가 그대로인데 규정이 바껴서 순위가 바뀌었다고
한다면 의문을 제기하는 사람도 있을 법 하다고는 봅니다.
8gen2와 A15의 결과가 뒤집어졌듯이요.
댓글
사실 현대의 프로세서는 처리하는 연산, 명령어의 종류가 너무 다양해져서 어느정도 자의적인 가중치를 매겨 평가할 방법밖에 없는... 마치 옛날에는 플롭스같은게 거의 절대적으로 쓰였지만 지금은 특별한 경우가 아니면 안쓰고 다양한 벤치마크가 나와있는게 괜히 그런게 아니지요.