ベンチマークルールとガイドライン

UL Solutionsのベンチマークは、その正確で公平な結果により、皆様にご信頼いただいています。当社は、ハードウェアメーカーやソフトウェア開発者向けに、プラットフォームとベンチマークソフトウェアの相互作用における明確なルールを設けることで、その信頼性を守っています。ルールを一言で説明すると:

プラットフォームは、他のアプリケーションと同様に、変更や改良を行わずにベンチマークを実行しなければなりません


最適化ポリシー

ベンチマークに特化した最適化は禁止されています。さらに、ベンチマークで指定されたタスクを変更するような汎用的な最適化もすべて禁止されています。

  • プラットフォームによって、タスクの品質レベルが変化してはなりません。
  • プラットフォームは、ワークロードが要求する手法とは異なる手法を使用してはいけません。
  • プラットフォームは、変更によって同じ結果が得られる場合であっても、要求されたタスクの一部を置き換えたり削除してはなりません。
  • ベンチマーク ワークロードの実験データに基づく最適化は認められていません。
  • タスクの結果を変化させるような最適化は認められていません。

アプリケーション検出

プラットフォームがベンチマーク実行ファイルの起動を検出しない場合があります。プラットフォームが、ベンチマークの検出に基づいて、テストのパラメーターや要素の変更、置換、上書きをしたり、プラットフォームの通常の動作の変更することは禁止されています。

例外
  • 特定のプラットフォーム機能を有効にするための一般的なアプローチである場合(マルチGPUの使用など)、プラットフォームによるベンチマークアプリケーションの検出が許されます。
  • ベンチマークが正しく機能することを妨げる既知の競合要素がベンチマークアプリケーションとプラットフォームとの間に存在する場合、プラットフォームによるベンチマークアプリケーションの検出が許されます。これには、UL Solutionsの事前承認が必要になります。

掲載停止デバイス


UL Solutionsのベンチマークは、CPU、GPU、スマートフォン、タブレットの各モデルをパフォーマンス別にランキングして比較できるウェブサイトです。メーカーがルールを破ってデバイスのランキングを上げることは、不当であり、誤解を招きます。

そのため、当社のルールに沿わないデバイスはランキング掲載を停止させていただきます。これは、すべてのメーカーと管理担当者が顧客に対して公正で正直であることを奨励するための措置です。

掲載停止になったモデルは、ハードウェアランキングの一番下にスコアなしで表示されます。掲載停止になったデバイスのスコアは、デバイスの比較に使用しないでください。

デバイスの通報

出版関係のレビュワーのお客様には、スコアが疑わしいモデルをEメールでご報告いただくことが可能です。
ご報告の際は、根拠となる証拠を添付ください。

抗議する権利

デバイスが不当に掲載停止になったと思われる場合、または当社のベンチマークルールを遵守する形でデバイスのソフトウェアが更新された場合、当該デバイスのメーカーより当社にお問い合わせくださいますようお願いいたします。


  • 掲載停止になったモデルはどのように見分けられますか?

    掲載停止になったデバイスは、ベストスマートフォンベストタブレットのリストの一番下に、スコアなしで表示されます。

  • これらのモデルが掲載停止になった理由は何ですか?

    3DMarkの検出によりデバイスの挙動が変化する場合、そのベンチマークスコアは正確でなくなり、デバイス間の公平な比較に使用できなくなります。掲載停止は、メーカーが当社の規則に違反しているという証拠がある場合の最終手段です。

  • メーカーが不正ではないと主張している場合は?

    どのような意図があるにせよ、有効なベンチマークスコアを得るためには、メーカーは当社のルールに従わなければなりません。ルールを破れば、スコアは付与されません。とてもシンプルなルールです。デバイスが不当に掲載停止になったと思われる場合、メーカーから当社に問い合わせを行うことができます。

  • ベンチマークの目的は最大限のパフォーマンスを測定することではないのでしょうか?

    我々の業界外では、理論上の最大パフォーマンスを測定することにほとんど価値はありません。アプリやゲームを起動したときのデバイスのパフォーマンスを知ることに価値があります。3DMarkは、CPUスケーリングやサーマルスロットリングの効果、また、デバイスが電力とバッテリ寿命のバランスをどのようにして取るかを含む、実際のパフォーマンスを測定します。

  • 何も不正をしていないのに私のスコアが掲載停止になったのはなぜでしょうか?

    掲載停止は、お客様が何か悪いことをしたことを意味するものではありません。通常は、お使いのデバイスの管理担当者またはメーカーに責任があります。

  • 私のスマートフォンは純正品ですが、なぜ掲載停止になったのでしょうか?

    当社は、当社のルールに反する工場出荷時の設定を持つ純正デバイスモデルを特定し、掲載停止することとしています。改造モデルか純正モデルかを問わず、それら特定のモデルから得られるすべての結果が掲載停止に影響します。

  • ではオーバークロックも許されないのでしょうか?

    メーカーによるオーバークロックは、常にすべてのアプリに等しく適用されることを条件にとして許可されています。当社のベンチマークに対して選択的に適用されるオーバークロックの最適化は禁止されています。

  • スマートフォンをroot化すると掲載停止になりますか?

    いいえ。デバイスのroot化、改良、調整は、ベンチマークの楽しみの一環です。root化、改良、ジェイルブレイクされているデバイスの結果に基づき、掲載停止措置を取る予定はありません。

  • 有効なスコアを得るにはどうしたらよいですか?

    掲載停止されたデバイスで有効なスコアを取得するには、メーカーまたは管理担当者による更新が必要となります。お使いのデバイスのメーカーや管理担当者に連絡し、このページを提示してください。

  • MediaTekプロセッサーを搭載した一部のデバイスが掲載停止になったのはなぜですか?

    これらのデバイスでは、PCMark for Androidの実行時に、隠れた「スポーツモード」やその他のアプリ固有の最適化が自動的に使用されます。しかし、名前以外で異なる部分のない別バージョンのアプリではこれらが行われないため、PCMarkで実際のパフォーマンスを測定することはできません。

  • Huawei P20 Pro、Huawei P20、Huawei Nova 3、Huawei Honor Playが掲載停止になっているのはなぜですか?

    これらのデバイスでは、デバイスの通常の電力プロフィールを上書きする隠れた「パフォーマンスモード」が自動的に使用されるためです。しかし、名前以外で異なる部分のない別バージョンのアプリではこれらが行われないため、3DMarkで実際のパフォーマンスを測定することはできません。

  • Oppo Find XとOppo F7が掲載停止になっているのはなぜですか?

    これらのモデルは、3DMarkアプリの実行時に自動的にフルスピードで動作するためです。しかし、名前以外で異なる部分のない別バージョンのアプリではこれらが行われないため、3DMarkで実際のパフォーマンスを測定することはできません。

  • HTC One (M7)、HTC One Mini、Samsung Galaxy Note 10.1、
    HP Slatebook 10 x2が掲載停止になっているのはなぜですか?

    これらのデバイスは3DMarkを検出し、UIで3DMarkがアイドル状態であっても、CPUクロックが最大に設定されます。名前以外で異なる部分のない別バージョンのアプリではこれらは行われないため、3DMarkで実際のパフォーマンスを測定できることはできません。

  • Huawei Ascend P7が掲載停止になっているのはなぜですか?

    このモデルは、3DMarkの実行時にパフォーマンスが向上しますが、名前以外で異なる部分のない別バージョンのアプリの実行時にはパフォーマンスは向上しません。

  • HTC One (M8)が掲載停止になっているのはなぜですか?

    このデバイスでは、3DMarkを検出した際に自動的に特別な高パフォーマンスモードが有効になります。名前以外で異なる部分のない別バージョンのアプリではこれが行われず、3DMarkで実際のパフォーマンスを測定できないためです。

  • Samsung's Galaxy S IVとGalaxy Note IIIのバージョンの一部が掲載停止になっているのはなぜですか?

    Android 4.3を使用するこれらのデバイスでは、3DMarkが検出された際にCPUクロックが最大に設定されます。しかし、名前以外で異なる部分のない別バージョンのアプリではこれらが行われないため、3DMarkで実際のパフォーマンスを測定することはできません。これらのデバイスで有効な3DMarkスコアを得るには、公式のAndroid 4.4.2アップデート以降を使用してください。

Powered by