並べ替え：新着順
「黄金のレガシー」ベンチマークソフトについて プロデューサー兼ディレクターの吉田より最新の状況をご報告いたします。 🆕「黄金のレガシー」ベンチマークソフトについて：続報 🌐sqex.to/duTSy #FF14 pic.twitter.com/VX4pozrB6v
極、零式、絶をプレイ中の環境であるChrome、OBS（配信）を起動した場合 ファイナルファンタジーXIV: 黄金のレガシー ベンチマーク sqex.to/ffxiv_bench_jp #FF14 SCORE: 17355 3440x1440 最高品質 DX11 FSR AMD Ryzen 9 5900X 12-Core Processor NVIDIA GeForce RTX 4080(VRAM 16050 MB
それもあるからTextGenerationWebUIの人は設問内容は非公開でベンチマークしてる。 これはこれで、中の人の信頼性も問われる話だけど。 oobabooga.github.io/benchmark.html
最近のLLM、カンニングしてねえか？疑惑を検証するために、GSM8Kベンチマークと同じ形式のベンチマーク作って解かせてみたら、何故か元よりスコア下がるLLMが続出。お前らやっぱベンチマーク直接学習…つまりカンニングしやがってんな！グラフの左のモデルほどカンニング疑惑濃厚。逆に右の方のモデル…
「黄金のレガシー」ベンチマークソフトについて：続報 | FINAL FANTASY XIV, The Lodestone jp.finalfantasyxiv.com/lodestone/topi…
最近のLLM、カンニングしてねえか？疑惑を検証するために、GSM8Kベンチマークと同じ形式のベンチマーク作って解かせてみたら、何故か元よりスコア下がるLLMが続出。お前らやっぱベンチマーク直接学習…つまりカンニングしやがってんな！グラフの左のモデルほどカンニング疑惑濃厚。逆に右の方のモデル…
嘘ついてたらしい。。。ｗ ディスプレイの設定いじったら跳ね上がったｗ ファイナルファンタジーXIV: 黄金のレガシー ベンチマーク sqex.to/ffxiv_bench_jp #FF14 SCORE: 27879 1920x1080 最高品質 DX11 DLSS 12th Gen Intel(R) Core(TM) i9-12900KF NVIDIA GeForce RTX 4080
ベンチマークが使えないPS5勢の私、改善されてるらしい(?)けど、グラフィックアップデートでキャラが崩壊すると聞いたので、記録用に顔写真を貼っておく_φ(･_･ pic.twitter.com/iTy4T8RlHy
LLMベンチマーク自体がモデルに学習されてたら意味なくなるよなーと思っていましたが、やっぱり実際にそれっぽいことが起こってるんですねぇ…
Data contamination is a huge problem for LLM evals right now. At Scale, we created a new test set for GSM8k *from scratch* to measure overfitting and found evidence that some models (most notably Mistral and Phi) do substantially worse on this new test set compared to GSM8k.
で、ベンチマークのおじさんや黄金ひろしを見ると、『なるほど、こういう路線を目指してみたのかもしれないしコレはコレでアリなのかもしれないな？』とちょっと感じました。 吉田も「アントニオ・バンデラスみたいな」って名指しで言ってたし、海外の色男チックな濃い顔になった結果なのかな、と。
5月末にベンチマーク再公開したとして万人が納得するものを出すのは難しいと思うんだけど、また今回のベンチマーク並にフィードバックが返ってきたらどうするんだろう 6月半ばには7.0直前PLLも控えてるし不満ある人は勢いが止まらない気がする...
黄金ベンチマークやってみた！18000スコアだったので６年モノのPCでもまぁまだいけそうかな…！ グラプデでりんの顔どんな感じになるのかなって作ってみたら、めちゃくちゃ美人系になった(自賛)
ファイナルファンタジーXIV: 黄金のレガシー ベンチマーク sqex.to/ffxiv_bench_jp #FF14 SCORE: 20065 2560x1440 最高品質 DX11 FSR Intel(R) Core(TM) i9-14900K NVIDIA GeForce RTX 4070 SUPER 黄金のレガシー rdy pic.twitter.com/dh17gFYaEq
Eindebelle White 日記「ベンチマーク2回戦目（自作PCのトラブルシューティングは自分でやるしかない面倒な作業）」 | FINAL FANTASY XIV, The Lodestone jp.finalfantasyxiv.com/lodestone/char…
今から自作PC組み立てようか迷ってる❤️ でもデカいグラボを入れるところを見ちゃうとえっちになっちゃう😚 自分の手で組み立てたPCで、ベンチマークをいっぱいとりたいよ❤️ でも組み立て下手そうだから誰か教えてほしいなぁ💓 できたら一緒にベンチマークとりながらイチャイチャできる人いない?🥰
LLMのベンチマークデータへの学習データ混入状況の研究。 GSM8K同様の新しいテストセットGSM1Kを作り色々なLLMで両者のパフォーマンスの差分を確認→GPT-4やClaudeなどの商用モデルが同等の性能を示す中Mixtral 8x22Bやphi3は大きな性能差あり→GSM8Kにオーバーフィットしている恐れが。
Data contamination is a huge problem for LLM evals right now. At Scale, we created a new test set for GSM8k *from scratch* to measure overfitting and found evidence that some models (most notably Mistral and Phi) do substantially worse on this new test set compared to GSM8k.
ゴジラ-1.0 日本作品で音響設計が本気で凄いと感じた初の作品 兎に角緻密に音が作られており、アトモスの空間表現が半端ない 今回初めてこの作品を前知識なく見たが脚本も見事 2時間があっという間 音響、映像ともにベンチマークになる一本 エンドロールでのゴジラの咆哮まで見逃せない
#FFXIV #ミコッテ 前のPCだとベンチマーク起動すらしなかったけど新しいPCにしてからちゃんとベンチ動くし、画質の設定も最高品質にあげれたからガビガビが取れて綺麗になったのが良かった。 pic.twitter.com/ICnpqfKyiC
返信先:@nakajimegame原神に関しては同じOnePlusで比べると4FPS差で、8Gen3の制御が下手な端末とは遜色ないので高評価です。しかしスタレなどではGPUの性能の差で、8 Gen 2に負けますね。 ベンチマークだけ見れば8Gen2<7+Gen3<8Gen3という評価もできるかもしれませんが,総合的に実ゲーム性能を見たらだいぶ疑問ですよね〜
遅ればせながらベンチマークやって貰って自機確認。全然問題無かった…うちの子の解像度上がったな、くらいだった。 これで安心してレガシー楽しみに正座待機！！！ ベンチマークは妹が一晩でやってくれました。妹優秀ありがとうダヨ💕 pic.twitter.com/7Wrw4VT7mr
エンタメ
アニメ・ゲーム
アニメ・ゲーム
ITビジネス
グルメ
ニュース
エンタメ
スポーツ
