スキルを22本実際に動かして分かった「4つの現実」
運営が実機検証した22本の記録から見えた共通パターン。日本語業務での弱点、公称値と実測の差、うまく使うコツを正直にまとめます。
この記事の元データ
当サイトでは、掲載スキルの一部を運営が実際に Claude Code で動かして、所要時間・出力の質・つまずきポイントを記録しています(各スキルページの「運営検証レポート」)。この記事は、2026年7月時点で公開している実機検証22本分の記録を横断して、共通するパターンを抜き出したものです。
先に結論を言うと、「スキルはすごい。ただし宣伝文句どおりではない」。以下、4つの現実です。
現実1:日本語・日本の商習慣には、ひと工夫が要る
海外製スキルに共通する最大の弱点です。検証で実際に出た例を挙げます。
- ブランドガイドライン生成 や テーマ生成 は、フォント提案が海外フォント中心。游ゴシックなど和文フォントの組み合わせは追加指示が必要でした
- Word 生成 と PowerPoint 生成 は、日本語フォントを明示的に指定すれば安定しますが、指定しないと文字化けやフォント崩れの原因になります
- 社内アナウンス文生成 は海外スタイルが基本で、日本企業特有の「お詫び・配慮表現」が薄め。送る前に文末の調整が必要でした
対策はシンプルで、頼むときに「日本語で」「游ゴシックで」「日本のビジネス慣習に合わせて」と一言添えること。これだけで結果がかなり変わります。
現実2:「最後の一歩」は人間の仕事として残る
多くのスキルは9割を自動化しますが、最後の1割が人間に残ります。これを知らないと「期待外れ」に感じ、知っていれば「9割減らせた」と満足できます。
- Slack GIF 作成 が生成するのは「設計とコード」まで。実際の GIF ファイルにする実行ステップは人間側です
- 文書共同編集 は Word の変更履歴機能と直接連動しないため、最終的な反映は手作業です
- 営業メール作成 は件名から送信タイミングまで設計込みで返ってきますが、検証記録では「相手の最近の動きを1つ調べて差し込む工程は人間がやる必要がある」という結果でした
現実3:公称値は「最良ケース」。実測には幅がある
宣伝文句の数字は、疑ってかかるくらいでちょうどいいです。
象徴的だったのが、トークン消費を削減する Tokenless の検証です。公称「最大50%削減」に対し、運営が評価ツールを隔離環境で実測したところ、作業内容によって18〜47%と大きな幅がありました。効果は本物ですが、「最大」の値だけを見て導入すると期待とずれます。
当サイトの検証レポートでは、こうした「公称と実測の差」「イマイチだった点」もそのまま書くことにしています。良いことしか書いていないレビューは、選ぶ側の役に立たないからです。
現実4:事前情報を渡すほど、賢く働く
「入れただけで魔法のように動く」は誤解で、こちらが渡す情報の量に比例して出力が良くなるのが実態です。
- Web アプリテスト は、対象アプリの URL 構造や画面の流れを渡さないと、一般的な検索フォームを想定した的外れなテストになりがちでした
- フロントエンドデザイン は、自社のデザインルールを事前に共有しないと、汎用的な見た目に寄っていきます
一方で、事前情報が揃ったときの出力には驚きもあります。PDF Extractor の検証では、頼んでいないのに金額の小計・税・合計を表に再構築してきましたし、Excel ヘルパー は計算結果を値ではなく Excel の数式として埋め込むため、元データを変えると自動で再計算されました。書籍翻訳 は同じ原文を「カジュアル/標準/最上級丁寧」の3レベルで並列出力できました。
まとめ:検証済みの情報で選ぶのが一番の近道
22本を動かした所要時間は1本あたりおおむね8〜15分(最長は Tokenless の30分)でした。つまり「試すこと」自体のコストは低いのですが、どれを試すかの選定とつまずきの回避に時間を取られます。当サイトの検証レポートは、まさにその部分を先回りして記録したものです。
各スキルページでは、実際に与えた指示・返ってきた出力・良かった点・イマイチだった点・5軸スコアまで公開しています。導入前にぜひ見比べてください。
関連記事:安全なスキルの選び方 / スキルのインストール方法