Fugu Ultraレビュー：性能と料金は妥当か？

TL;DR

Fugu Ultraは、複数の外部モデルを束ねて回答を作るオーケストレーターモデルで、単一モデルより幅広い強みを取り込める。検証者はワンショット性能を評価する一方、Fable級の深さは確認できず、出力単価や利用枠も踏まえると、直近ではClaude Opusを優先すると結論づけた。

Transcript

おすです。本日はですね、魚AIからフグ という、え、モデルが登場していて、ま、 これがですね、非常に話題になってますん で、解説していきたいと思います。え、 実際ね、僕もちょっとサブスクしてみて、 このフグ、フグウルトラというね、え、 モデルが登場してるんですけども、 ウルトラの方をね、ちょっと使っていたん ですけど、え、これパフォーマンスがね、 フェイブルとかミト数よりもね、上だと いうのを、ま、ベンチマークとかでも色々 と共有してくれているんですけども、ま、 それが気になりまして使ってたんですけど 、ま、そこの部分をね、え、ちょっと皆 さんにも共有できたらという風に思って おります。ま、このフグってそもそも何な んだとかね、え、そういうのも含めて解説 ができればと思います。というところで... Read More

Key Insights

• Fugu Ultraは、Gemini、Claude、GPTなどをエージェントプールとして扱い、タスクの委任と回答の統合を行うオーケストレーターモデルである。
• Fuguの内部構成はブラックボックスであり、表示されたモデルプールから各モデルを選択して処理しているという説明には、検証者による推測が含まれている。
• 公開されたベンチマークではHumanity's Last Examで50超と紹介されたが、実使用だけでは個別モデルを大幅に超える性能かどうかを確認できなかった。
• 3D格闘ゲームの生成結果は、攻撃方向やキャラクター動作に不自然さがあり、検証者はFableの細部まで行き届いた実装との差を大きいと評価した。
• 3Dマーブルランの生成結果は実装として成立しており、検証者はGPT系を含む複数モデルの長所が組み合わされた可能性を感じたと述べている。
• Fugu Ultraの強みは、一つの能力を深く伸ばすことよりも、複数モデルの得意分野を組み合わせて横断的な対応力を得る点にあると評価された。
• Fugu Ultraの単価は入力100万トークン当たり5ドル、出力100万トークン当たり30ドルと紹介され、検証者は利用しにくさを感じる水準だと評価した。
• Fuguの有力な用途は、特定モデルへのアクセス停止に備え、複数の代替モデルへタスクを振り分けながら性能とコストを調整することである。
• 🎬 このチャンネルの他の動画:
  • マルチエージェント設計パターンの選び方
  • Claude Codeで動的ワークフローを使う方法
  • Claude Opus 5向けプロンプト設計の方法
• 📺 このチャンネル: まさおAIじっくり解説ch

Questions & Answers

Q: Fugu Ultraとは何ですか？

Fugu Ultraは、複数のAIモデルへタスクを委任し、その結果をまとめて返すオーケストレーターモデルです。OpenAI互換APIから呼び出せ、コンソール上ではGemini、Claude、GPTを含むモデルプールが示されています。ただし、内部の選択基準や統合処理にはブラックボックスの部分が残ります。

Q: Fugu Ultraはどのように回答を生成しますか？

Fugu Ultraは、自力で処理できる内容には直接回答し、必要に応じてエージェントプール内のモデルへ仕事を委任し、最終結果を統合すると説明されています。どのタスクをどのモデルへ任せるかが性能やコストを左右しますが、具体的な委任ルールは外部から確認できません。

Q: Fugu UltraはFableより高性能ですか？

実使用の範囲では、Fableより高性能だとは確認できませんでした。検証者は、Fugu Ultraには複数モデルの長所を取り込む横方向の強さがある一方、Fableで感じた細部への配慮や実装の深さには届いていないと評価しています。これは限られたデモに基づく個人の所感です。

Q: Fugu Ultraのベンチマーク結果は信頼できますか？

公開値だけで実利用時の優位性まで断定することはできません。動画ではHumanity's Last Examで50超という値が紹介されましたが、検証者はエージェントプール内のモデルを大幅に上回ったという印象を得ていません。評価には、同条件の実タスクと出力品質の比較が必要です。

Q: Fugu Ultraの料金はいくらですか？

紹介されたサブスクリプションは20ドル、100ドル、200ドルの3プランです。Fugu UltraのAPI単価は入力100万トークン当たり5ドル、出力100万トークン当たり30ドルとされています。検証者は20ドルプランで重い処理を数件試しただけでも利用枠が厳しくなったと報告しています。

Q: Fugu Ultraはコーディングに使えますか？

Fugu Ultraはコーディングに利用でき、検証では3D格闘ゲームと3Dマーブルランを生成しました。マーブルランは実装として成立した一方、格闘ゲームには攻撃方向や動作の不自然さが残りました。そのため、生成の成否だけでなく、細部、バグ、操作性を別途確認する必要があります。

Q: Fugu Ultraと自作マルチエージェント構成の違いは何ですか？

Fugu Ultraは、モデルの選択、委任、結果統合を一つのAPI経由で利用できる点が主な違いです。自作構成ではCodexに実装させてClaudeにレビューさせるなど、役割や処理順を細かく設計できます。検証者は、十分に作り込んだ自作ハーネスの方が良い結果になる可能性もあると述べています。

Q: Fugu Ultraはどのような人に向いていますか？

Fugu Ultraは、複数モデルを組み合わせたいものの、自分でマルチエージェント用ハーネスを構築するのが難しい人に向く可能性があります。また、特定モデルが利用できなくなるリスクに備え、代替モデルへ処理を振り分けたい場合にも候補になります。ただし、料金と利用枠の確認が必要です。

Summary & Key Takeaways

• FuguとFugu Ultraは、OpenAI互換APIから利用できるオーケストレーターモデルである。コンソール上のモデルプールにはGemini、Claude、GPTが表示され、タスクを各モデルへ振り分け、結果を統合する仕組みと説明された。ただし内部処理はブラックボックスであり、具体的な委任ルールは確認できていない。

• 実用検証では、Fugu Ultraに3D格闘ゲームと3Dマーブルランなどを生成させた。格闘ゲームには攻撃方向や動作の不自然さが残り、検証者はFableほど細部に配慮された出力ではないと評価した。一方、マーブルランは実装できており、GPT系など複数モデルの長所を横断的に取り込む強さは感じられたという。

• 料金プランは20ドル、100ドル、200ドルで、Fugu Ultraの単価は入力100万トークン当たり5ドル、出力100万トークン当たり30ドルと紹介された。20ドルプランでは重い検証を数件行うだけで利用枠が厳しくなったため、手軽さはあるものの、コスト、自作構成との差、単一の強力なモデルとの差を見極める必要がある。