さっそく実験した人がいました。
膝の痛みの相談をぶつけたら——
Haikuは『トレーナーに相談を』と店員として答え、
Sonnetは『医学的な判断はできかねるので医師に』と一歩引いた案内をした。
同じプロンプト、同じ質問で、性格の違いがくっきり出たんです👀
面白そうでしょう?
今日は研究所全体で、この実験をやります。
名付けて、AI頭脳の利き酒大会です🐸
━━━━━━━━━━━━
■ 手順①:実験のやり方(15分)
━━━━━━━━━━━━
①今のHaikuのまま、下の質問セットを送って、答えをスクショ
②GASのmodel行をSonnetのモデル名に書き換え→保存→新バージョンでデプロイ
(Sonnetの最新モデル名は、AI相談相手に聞くかAnthropicのドキュメントで確認)
③同じ質問セットをもう一度送って、スクショ
④model行をHaikuに戻す→保存→新バージョンでデプロイ(戻し忘れ注意!)
▼質問セット▼
1. 営業時間は?(基本の正確性)
2. おすすめは?(提案の質)
3. 業種の際どい質問(例:この症状に効きますか?/法的に大丈夫ですか?)
4. ちょっと雑談(例:最近疲れてて…)
▲ここまで▲
3と4が今日の主役です。
基本問題は両者とも正解します。差が出るのは、境界線の質問です🔥
━━━━━━━━━━━━
■ 手順②:見るポイントは3つ
━━━━━━━━━━━━
(1)言い切り度
言い切って頼もしいか、一歩引いて慎重か。
医療・美容・お金の業種は、引いてくれるほうが安全なことも。
(2)速さ
返信までの体感秒数。接客では、これが想像以上に効きます。
(3)文の長さと丁寧さ
長い=良いではありません。スマホで読みやすいのはどちらか。
先行実験の知見も置いておきます👇
・Sonnetは安全側に案内する傾向(医師へ、確認しますへ)
・Haikuは言い切り気味で歯切れがいい
・Opusは賢いが、接客には遅い(体験済みの人、いましたね^^)
━━━━━━━━━━━━
■ 手順③:実験のあと、自分の答えを決める
━━━━━━━━━━━━
実験が終わったら、この3つを自問してください。
・うちのお客さんの質問は、込み入っているか?
・うちの接客は、速さと慎重さ、どちらが体験を作るか?
・月額とAPIコストのバランスは合うか?
多くの人は『Haikuで十分』に戻ってくるはずです。それが正解。
でも、自分の目で確かめてから選んだHaikuは、説得力が違います。
オーナーに『なぜこのAIなの?』と聞かれて、
『比較実験して選びました』と言える人は、もう専門家です✋️
⚠️コストの心配は無用です。実験全体で数十円レベル。
ただし、Sonnetのまま戻し忘れると月額の利益が減っていくので、
健康診断の項目に『今の頭脳はどれ?』を足しておきましょう🐸
━━━━━━━━━━━━
■ 今日のアウトプット
━━━━━━━━━━━━
実験結果を『Haiku派/Sonnet派+理由』でコメントしてください^^
(例:『Haiku派!速さは正義でした』『際どい質問の引き際でSonnet派になりました』)
ビフォーアフターのスクショも大歓迎です📸
(※APIキーの写り込みにはご注意を!)
みんなの結果が集まれば、業種別の頭脳選び早見表が作れそうです✨️
今日はここまでです☺️✨️
LINEを無料で初めるなら「エルメッセージ」
👇クリック👇