• Geekbench 6, 새로운 Core Ultra 200S Plus 칩의 일관성 없는 벤치마킹 성능에 대해 경고 — 인텔의 IPC 향상 바이너리 최적화 도구가 점수를 '불분명한' 방식으로 수정한다고 밝히다

    iBOT은 인텔에게 게임 체인저가 될 잠재력을 가지고 있지만, 벤치마킹 도구들에게는 난제가 되고 있는 것으로 나타나고 있다.

    article image

    인텔이 최신 Core Ultra 7 270K Plus 및 250K Plus CPU에 적용한 가장 주목할 만한 개선 사항 중 하나는 IPC(클럭 당 명령어 처리 횟수)를 향상시키기 위해 하드웨어 레벨에서 명령어 자체를 조작하는 바이너리 최적화 도구(Binary Optimization Tool)의 도입입니다. 이 도구는 Arrow Lake 아키텍처에서 추가 성능을 이끌어내는 데 매우 유용하지만, 동시에 해당 칩들의 벤치마크 정확도 및 일관성에 대한 우려를 낳고 있습니다. Geekbench의 John Poole은 사용자들에게 인텔의 최신 도구는 현재로서는 신뢰하기 어렵다고 경고했으며, 벤치마크 실행 과정 중 해당 도구가 활성화되었는지 비활성화되었는지 식별할 방법이 없다고 밝혔습니다.

    Poole에 따르면, 인텔은 바이너리 최적화 도구(iBOT)가 코드를 최적화하는 기술에 대해 어떠한 공개 문서도 제공하지 않고 있습니다. 이 때문에 iBOT의 최적화 기술이 다양한 애플리케이션에 적용되었을 때 얼마나 효과적인지 판단하기 어렵습니다. 더욱이 이러한 문제는 Primate Labs(Geekbench 개발사)와 사용자 커뮤니티가 iBOT가 적용되지 않은 기준 벤치마크와 비교하여 성능 향상 정도를 측정하는 것을 불가능하게 만듭니다. Poole은 iBOT를 활성화했을 때 Geekbench 6의 워크로드 점수는 최대 40%까지 증가하며, 전체 점수는 최대 8%까지 향상된다고 언급했습니다. 그는 "이 도구가 벤치마크 자체를 수정하고 있기 때문에, Primate Labs와 일반 대중 모두가 이러한 변화가 어떻게 발생하는지 명확히 알 수 없다"고 경고했습니다.

    이러한 문제에 대응하기 위해 Geekbench는 iBOT 지원 칩을 사용하는 모든 Geekbench 벤치마크 목록에 다음과 같은 경고 문구를 추가할 예정입니다: "본 벤치마크 결과는 시스템에서 실행될 수 있는 바이너리 수정 도구로 인해 유효하지 않을 수 있습니다."

    Geekbench, 인텔 iBOT의 최대 30% 성능 향상을 조사하다

    article image

    불가피하게도, Geekbench 개발진은 iBOT를 이러한 방식으로 다룰 수밖에 없습니다. 벤치마크의 반복적인 일관성은 사용자뿐 아니라 Geekbench 6과 같은 벤치마크 애플리케이션을 제작하는 팀에게 매우 중요한 요소이며, 이러한 신뢰도를 잃게 되면 벤치마크 애플리케이션으로서의 유용성과 공신력이 훼손됩니다.

    다행히도 인텔은 이러한 불일치성을 인지하고 있는 것으로 보입니다. 인텔은 Tom's Hardware의 편집자이자 주요 CPU 리뷰어 중 한 명인 Jake Roach에게, 이 기능을 공개하는 것에 대해 신중하며, 벤치마크에서 유리하게 보이려고 부정행위를 했다는 비판을 피하고 싶어 한다는 점을 전했습니다. 현재 iBOT는 Geekbench 6.3을 제외하고는 소수의 PC 게임에서만 지원되고 있습니다. 인텔은 iBOT가 게이밍 작업 외의 워크로드에서도 잠재적으로 어떤 성능을 낼 수 있는지에 대한 개념 증명(PoC) 목적으로 Geekbench 6.3에서 iBOT를 사용하고 있습니다. 예를 들어, 270K Plus 리뷰에서 테스트된 결과, Geekbench 6.3에서 iBOT를 적용했을 때 265K 대비 약 10%의 성능 향상이 관찰되었습니다.

    Core Ultra 7 270K Plus와 Core Ultra 5 250K Plus는 올해 하반기 Nova Lake가 출시되기 전 LGA 1851 플랫폼에서 인텔의 마지막 주요 시도일 수 있는 모델로 이번 주에 처음 공개되었습니다. 두 칩 모두 이전 세대였던 기대에 못 미쳤던 Core Ultra 200S 시리즈 모델들과 비교했을 때 상당한 성능 개선을 보여주었습니다. 두 SKU 모두 'Plus'가 아닌 버전보다 가격 경쟁력이 높으면서도, 네 개의 추가 E 코어 덕분에 눈에 띄게 우수한 멀티쓰레딩 성능을 제공합니다.

    가장 최신 뉴스, 분석 및 리뷰를 받으려면 Google News에서 Tom's Hardware를 팔로우하거나 즐겨찾는 출처로 추가하십시오.

    [출처:] https://www.tomshardware.com/pc-components/cpus/geekbench-6-warns-about-inconsistent-benchmarking-performance-from-new-core-ultra-200s-plus-chips-says-intels-ipc-boosting-binary-optimization-tool-modifies-scores-in-unclear-fashion