GreenCube
JA
GreenCubeを入手

GreenCubeブログ

RTX 5060でAIは動く?実測:毎秒56トークン

はい。NVIDIA RTX 5060(8 GB)とRAM 32 GBを搭載したデスクトップPCで、Gemma 4 E4Bは毎秒56トークンで書き出しました。読むより速く答えが出てきます。

56Gemma 4 E4Bでの毎秒トークン数
4.6×CPUよりカードのほうが速い

実際の使用感

作業このPCでの時間
普通の回答を書く(400トークン)7 秒

このPCで計測した速度から算出しました。時間は長さ÷速度で、実際の回答では書き始めるまでに少し時間もかかります。目安として、英語の場合、多くの人が読む速さは1秒に約4語です(Brysbaert, 2019)。日本語ではトークン数と文字数の関係が一定ではないため、ここでは換算していません。400トークンの回答は、読むだけでもそれなりに時間がかかります。

計測結果

書き出しは、AIが回答を打ち出す速さで、1秒あたりのトークン数で表します。トークンは単語の断片です。読み込みは、渡したもの(質問、貼り付けた文章、PDF)を取り込む速さです。AIは多くのトークンを一度に読めますが、書くときは1つずつなので、読み込みは常に書き出しよりずっと速くなります。

項目実行場所結果計測方法
Gemma 4 E4Bグラフィックボード55.9 トークン/秒 書き出し2026年10月1日
Gemma 4 E4BCPUのみ12.1 トークン/秒 書き出し2026年10月1日

各数値の計測方法:計測方法の詳細

  1. GreenCube 0.1.42自身の速度テスト。起動時にグラフィックボードとCPUのどちらを使うか選ぶために実行し、それぞれで短い回答を1回書き出します。

複数回計測したものは範囲で示しています。同じPCでも、回ごとに速度が少し変わるためです。

その意味

仕事をするのはグラフィックボード

同じPC、同じAI(Gemma 4 E4B)で、CPUのみでは毎秒12.1トークン、グラフィックボードでは毎秒55.9トークン、約4.6倍の速さです。グラフィックボードはゲームのために何千もの小さな計算を同時にこなすよう作られていて、AIの実行もほとんどが同じ種類の計算です。GreenCubeは起動時に両方の速さを測り、速いほうを使います。

AI全体がカードに収まる

Gemma 4 E4Bは4.2 GBのファイルで、カードには専用のメモリ(VRAM)が8 GBあります。全体が収まり、会話用の余裕も残るので、カードがPCの他の遅いメモリを待つことがありません。これがこの速さの一番の理由です。

大きいGemma 4 12B

快適ではありません。GreenCubeが大きいGemma 4 12Bを勧めるのはVRAMが10 GB以上のカードだけで、このカードは8 GBです。8 GBのAMD RX 5700 XTでは、短い質問には答えましたが、長いチャットでクラッシュしました。

画像

おそらく可能ですが、このカードでの画像生成はまだ計測していません。計測したら、ここに数字を載せます。画像には約6 GBの専用AIを使い、チャットの回答よりはるかに多くの計算をするので、ここではグラフィックスの差がさらに大きく出ます。

他との比較

Gemma 4 E4Bで計測した8台のPCのうち、このPCの書き出し速度は3位です。RX 5700 XTは毎秒63–72トークンで、約20%速いです。RTX 3060は毎秒53–55トークンなので、このPCは約5%速いです。

8 GBのカードを4枚計測しましたが、速さには大きな差があります:

どのAIが収まるかはメモリで決まり、どれだけ速く動くかはカードの新しさで決まります。

テストに使ったPC

実験室のマシンではなく、実際のテスターが普段どおりに使っている自分のPCです:

自分のPCを確認する

自分のPCの構成がわからない?30秒で確認できます:

  1. Ctrl + Shift + Escを押して、タスク マネージャーを開きます。
  2. パフォーマンスを開きます。
  3. メモリをクリック:右上の数字がRAMです。
  4. GPUをクリック:右上の名前がカード名で、専用 GPU メモリがVRAMです。専用メモリのないIntelやAMDのグラフィックスしか表示されない場合は、独立したカードはありません。

次に、全体の表でいちばん近いカードを探してください。同じカードでもVRAMが多ければ大きいAIが収まり、同じ容量なら新しいカードのほうがたいてい速く動きます。

計測した他のPC

自分のPCでAIは動く? 10台すべてのPCを1つの表に。自分のPCでの使用感も。

よくある質問

RTX 5060でAIをローカルで動かせますか?

はい。NVIDIA RTX 5060(8 GB)とRAM 32 GBを搭載したデスクトップPCで、Gemma 4 E4Bは毎秒56トークンで書き出しました。読むより速く答えが出てきます。

RTX 5060でAI画像を作れますか?

おそらく可能ですが、このカードでの画像生成はまだ計測していません。計測したら、ここに数字を載せます。

AIはRTX 5060とCPUのどちらが速いですか?

カードのほうが圧倒的に速いです。CPUの毎秒12.1トークンに対し、カードでは毎秒55.9トークン、約4.6倍です。

RTX 5060でGemma 4 12Bは動きますか?

快適ではありません。GreenCubeが大きいGemma 4 12Bを勧めるのはVRAMが10 GB以上のカードだけで、このカードは8 GBです。8 GBのAMD RX 5700 XTでは、短い質問には答えましたが、長いチャットでクラッシュしました。

自分だけのAIを、自分のPCで

GreenCubeはあなたのPCで動きます。使用制限なし、サブスクなし、インターネットなしでも使えます。€9.99の買い切りです。

GreenCubeを入手