チート疑惑のあるSamsungおよびHTC製端末、ベンチマークテストのランキングページで晒し上げ状態に 79
ストーリー by hylom
常に本気を出して熱くなればいいじゃない 部門より
常に本気を出して熱くなればいいじゃない 部門より
あるAnonymous Coward 曰く、
Futuremarkは25日、ベンチマークツール「3DMark」のランキングページにおいて、スコアに不正が疑われるデバイスに対する対処を発表した。問題とされているのはSamsungのGalaxyNote系4機種とHTCのOneとMiniの2機種。Futuremarkがこのような発表を行った背景として、一部のAndroidデバイスにおいて、3DMark実行時にGPUの動作クロックを通常時よりも高速化するよう"最適化"していたという疑惑が持たれているとのこと（マイナビニュース、HOT HARDWARE、Slashdot.org）。
HOT HARDWAREの記事によれば、Futuremarkはハードウェアメーカーが3DMarkの固有の最適化を行うことを許可していない。Futuremarkのベンチマークのルールを破るものだと強く非難しているようだ。問題とされた製品はリストから完全に除外された訳ではなく、スコアを消去された状態でリストの最下位層に掲載されており、晒しあげ状態となっている。
ベンチマーク結果一覧 (スコア:1)
HotHardwareにもマイナビにも/.orgにも、そしてもちろん/.Jにもリンクがないんだが、
該当のベンチマーク結果一覧のページのURLは以下。
http://community.futuremark.com/hardware/mobile [futuremark.com]
Re: (スコア:0)
Futuremarkより艦これが動くかどうかが知りたいよ>今後の端末。
Re: (スコア:0)
動きません。
Re: (スコア:0)
ああ、別にandroidである必要は無いです。上のリンクのベンチマークのランキングもandroidだけに限ったものでないですし。
ほどほどの重量と電池の持ち具合で艦これができる端末(ほどほどの将来性があればなお良い)が欲しいのです。
Re:ベンチマーク結果一覧 (スコア:1)
リモートデスクトップでいいんじゃないでしょうか
あれがサクサク動くような端末はまだ少ないと思います
Re: (スコア:0)
諦めが悪いですね
Re: (スコア:0)
FlashPlayerの動向をみればわかるように、
主にWindows/Windows RT搭載の端末で動くものだと思えばよろしいかと。
Puffin Browserとかで裏技的に動かす仕組みはありますが、
あれで「動く」とは私は言い切れませんね。
Re:ベンチマーク結果一覧 (スコア:2)
艦これぴったん とかで動かしてます。
まあまあ快適。
影響あるの？ (スコア:0)
ベンチマークのランキングページを見に行ったことのある人ってどれくらいいる？
Re:評価方法 (スコア:2, すばらしい洞察)
サムスン関係者乙ｗ
ベンチマークはそもそも「通常使用でのパフォーマンスを図るもの」
なのに、通常使用とは違うコードを流して見た目だけ上げるようなユーザーに不誠実な企業はさらされますよってだけだろ。
＞対応されてしまって正当な評価ができない
ようにコスイ手を使ってるのは誰でしょうｗ
それこそ、
「そういうの対応する方があらぬ方向の徒労」するより「正統に（パフォーマンスが上がるように）努力しろよ。ハードメーカーは」
って話ですねＷＷＷＷＷＷ
そうしないと、屑メーカーとして晒されますよ。
ってそんだけの話ｗ。
だってそもそも「プロセスがそのベンチマークソフト名の時だけCPU2倍速」とかやってんだものｗ
Re:評価方法 (スコア:1)
FuturemarkがAndroid端末評価の現状に合っていないのが原因の一部なのは事実だと思います。
昨今のAndroid端末は最大処理速度が急激に上がって来ていて、発熱との戦いになっている。
だから、発熱抑制のリミッターをどうやって外すかが処理速度の肝になっている。
極端な話、中華端末なんかは発熱なんてどうでもよいので最大速度を出すことができる。
# 富士通とかもかな。
でも、SamsungやHTCなどの大手企業はそういう危ないことはできない。
未だにFuturemarkのベンチマーク結果を見て端末を評価する客が多いので、品質重視の企業ほどジレンマに陥る。
だからコスイことをしてよいということにはなりませんが、Futuremarkをスポーツ競技とか消費者テスト的なものだとして見るのはどうかと思います。
Re: (スコア:0)
だからってコスイことをしてよいということにはなりません。
Re: (スコア:0)
＞発熱抑制のリミッターをどうやって外すかが処理速度の肝
なら、すべてのアプリでそうすればいい話。
なんで「プロセス名が該当のベンチマークだけリミットはずすのかねｗ」
「発熱抑制のリミッター」ならベンチマークでもはずす必要ないだろｗ
Re: (スコア:0)
> だってそもそも「プロセスがそのベンチマークソフト名の時だけCPU2倍速」とかやってんだものｗ
なんつーか、インチキするのが悪いとは思わんが、
やるならもっとうまくやってほしいわ。
Re:評価方法 (スコア:1)
逆に考えれば「プロセス名をベンチマーク名に偽造」ってことをすれば
どんなアプリでも超高性能な状態で動いてくれるってことなんじゃないの？
// 電池が即死するかもなｗ(:>^
Re: (スコア:0)
爆発する方に500ウォン硬貨１枚
Re:評価方法 (スコア:1)
デスヨネー
Re:評価方法 (スコア:1)
爆発力もベンチマーク対象にすれば問題なし。
#黒色火薬３４ｇ相当とかＴＮＴ火薬、東京ドーム１０杯分相当とか
Re: (スコア:0)
インチキというか
「そのベンチマークの時だけ」じゃなくて「そのベンチマークが使用する命令文の時だけ」
にすりゃいいのにね。
その場合は同じ命令文を使うソフトのパフォーマンスも上がるので、インチキと言えるか微妙。
今、サムスンやHTCがやってる「プロセスがそのベンチマーク名の時だけ」なんてやったら
他のソフトではそのパフォーマンスが出ることはあり得ないので、完全なインチキとして晒されて当り前ですよｗ
Re: (スコア:0)
> だってそもそも「プロセスがそのベンチマークソフト名の時だけCPU2倍速」とかやってんだものｗ
そんな話だっけ？
もしそれが本当なら、FutureMark社はプロセス名を変えてやらせてみてはどうだろう？
CPUが２倍ってのも本当だろうか？
そんなに高速化できちゃうような高性能のCPUを使っているのかな。
誰か、どれだけサムスンとhtcがインチキをしていたのか該当機種ユーザーは試してみてはくれないか。
Re: (スコア:0)
ググレばいくらでもあるけど、とりあえずスラドJでの既報 [srad.jp]
Re: (スコア:0)
ごめん、まったくわからない。
ググってもコメントで書かれているような話は見つけられないし、既報も何を指しているのか。
イｔンチキは事実かも知れないが、インチキの程度は大げさに書いてしまったということで理解してよろしいか？
Re: (スコア:0)
俺が理解できないからあれはイｔンチキはないとか言われてもなあ
Re: (スコア:0)
リンクがおかしいのか、このストーリーが表示されるんだよ。
元ACの人は正しいリンクを貼ってくれ。
Re: (スコア:0)
ふつうに関連リンクにあるだろ
特定のベンチマークアプリでのみリミッターを解除するSamsung Galaxy S4
http://mobile.srad.jp/story/13/08/02/03592 [mobile.srad.jp]
Re: (スコア:0)
GPUの話だし、既報 [srad.jp]では480MHz→532MHzと1.1倍だし、「CPU2倍速」ってどこの情報？
ググっても見つからないし、印象操作？
Re: (スコア:0)
ヒント：CPUはARM
Re:評価方法 (スコア:2)
その通りでしょう。
Futuremarkの行動は「通常時の性能が計測できないため、誤情報の発信を避けるべくランキングから外した」とでもして正当化出来ますし、 それを、端末メーカー寄りの立場で「主要な端末の全てに対応できていないのに業界標準ベンチマークであるかのごとく振る舞おうなんておこがましい」と表現してもウソではないですが。
無名のベンチマーク屋さんが名を売っている段階だと、なんとかして全端末対応の方法を開発するなりみんなから信頼を集める必要があるでしょうけど、 端末メーカー側から意識されるぐらいの存在感になった今ならもうちょっとは強気になれる、とかそんな感じでしょう。
評判を落とさずに出来るなら、安くて効果的な戦法だと思いますよ。
Re:評価方法 (スコア:1)
＞無名のベンチマーク屋さんが名を売っている段階だと、なんとかして全端末対応の方法を開発するなりみんなから信頼を集める必要があるでしょうけど、 端末メーカー側から意識されるぐらいの存在感になった今ならもうちょっとは強気になれる、とかそんな感じでしょう。
今こそ無名のベンチマーク屋さんにチャンス到来！ってことですね。
#その界隈の事は全く知らないのに無責任な煽りだこと
Re:評価方法 (スコア:1)
wを盛りだくさんにするまでもなく、もちろんそうですよ。
それを色んな立場から表現すると、ウソにならない範囲でなんとでも言いようがありますけどね、と言うだけの話です。
擁護、非難、ステマとか、色んな立場がありますし、それらの表現のどれをどう捉えるかは聞く人の勝手ですが、 「端末メーカー寄りの表現」が「端末メーカーが「インチキファーム」を組み込むぐらい意識しているFuturemarkの発表」より強い印象を与えられるとはとても・・・と。
Re:評価方法 (スコア:1)
別にウリナラルールでウリナラスコアリストを発表するのは誰にも禁じられてない。客がどっち信用するかってだけ。
Re: (スコア:0)
Android端末メーカーは「Futuremarkのベンチマークのルール」を守らないといけないと(Googleに?)定められているのかってのが少し気になる。
それともそれは、業界内での暗黙のルールというかフェアプレイ精神でしょうか。
そこを守らないとお互いの開発結果が正当に評価できないから、ちゃんと守ろうぜってな感じ。
なんでGoogleが出てくるんだ？
「Futuremarkのベンチマークのルール」を作ったのはFuturemarkに他ならないわけで。
Re: (スコア:0)
「ルールに従わないから統計から外された」ってだけですよね？
何も疑問点なんて無い気がしますが、どこが疑問なんでしょうか？
Re: (スコア:0)
ベンチマークだけクロックアップしている時点で詐欺。
PCでも散々発覚して叩かれてきたことだけれど、まさかアジアの片隅では馴染みが薄いなんて表現が飛び出すとは。
しかもGalaxyはGalaxy 2で既におこなっているのが明白だったし、ずっと継続して詐欺をおこなっている状態。
Re: (スコア:0)
ベンチマークの結果を参照しながらチューニングは普通にしたりする。
そうすると、そのベンチマークに特化した（ベンチマーク結果が上がるが通常使用では意味なし）チューニングしてしまうことがある。
そういう面から見るとこういう方法を取ってしまったのも分かる気がする。
Re: (スコア:0)
使用されてる命令基準ならそうなるのもわかりますが、サムチョンは「ベンチマークのプロセス名」で、
リミッタはずすってやってますので、
＞ベンチマークの結果を参照しながらチューニング
とは全くの別物です。
同じバイナリでプロセス名かえるとｽｺｱ7ががくんと落ちますｗ
Re: (スコア:0)
>Android端末メーカーは「Futuremarkのベンチマークのルール」を守らないといけないと(Googleに?)定められているのかってのが少し気になる。
>それともそれは、業界内での暗黙のルールというかフェアプレイ精神でしょうか。
そういう裏読みをする必要は無くて、要はH/Wの方で特殊な対応をされてしまうので
当該ベンチマークの結果について精度を保てないという事でしょう。
単にスコアから削除するとその辺が曖昧になるので、きっちりとそのことを表示した、と。
Re: (スコア:0)
対応されてしまって正当な評価ができないならそれはもう使えなくて。
別の手段で評価するしかないだろうけど、めんどくさいからチートとして晒して区別して終わるのかな。
と邪推。
いや、ほんまはそういうの対応する方があらぬ方向の徒労というかご苦労様でその分正統に努力しろよってことなんだけど。
だから前にも書いたが、マルウェアと同様にステルス技術を実装したベンチマーカーを作れと。
単純に技術で克服できる程度の問題なのだから。
Re: (スコア:0)
ならサムスンが独自にそういうベンチマークを作れば良いだけだろ。
Futuremarkが決めたルールが気に入らないなら自分で新しいルールを決めてそういうベンチマークを配ればいい。
Futuremarkのベンチマークでトップを取りたいのか、正しい評価方法のベンチマークでトップを取りたいのか、どっちなんだ？
Re:またアメ公のいちゃもんつけか (スコア:1)
特ア人乙
Futuremarkってドイツじゃなかったっけ。
…と、メディアはドイツから届いてたけど、本社はフィンランドだな。
Re: (スコア:0)
ノキアが負けたからいちゃもんつけたんだろうｗ
Re: (スコア:0)
Futuremark向け最適化ということは、Futuremark専用端末ととれなくもないから、そんなもの欲しいとも思わないな。
Re: (スコア:0)
こじらせてるなあ…
Re: (スコア:0)
>>誰かしら調べる奴は出てきて後々都合悪いことになるって分からなかったんだろうか
無理なことを要求すると差別だって言われますよ^^
Re: (スコア:0)
情報は必ず末端まで行きわたるわけじゃないし、浸透力は明らかにメーカーの方が上だから、
その浸透力の差分だけでも十分食ってけるってことでしょ。
Re: (スコア:0)
極東の兄弟国家ですから。日中韓どこが違うクツの先がちょっと
Re: (スコア:0)
だって、HTC既に八割くらい死んでるから叩く所残って無いやん……。
Re: (スコア:0)
そんなことばかり気にしてるあなたも十分病気だと思いますよ。
もしくはかの国の人ですか？
Re: (スコア:0)
だって俺達のHTCは何も悪いことしてねーし。
スコアが消されてても買っちまうし。
Re: (スコア:0)
光景被りすぎというが、何処の国でも時間をもてあました底辺がネットにかじりついてんだから、そりゃ似てくるだろうよ。
別に韓国に限らず、アメリカでも armchair patriots とかcouch potato conservatives呼ばれてるらしいから、その手の人種ってのは驚くほど万国共通って事だろう