今日の目的
今日は新しい機能を増やした日ではありません。
AIが本当に指示どおり動いているかを確かめる日でした。
Workflowを独立させた
READMEには
Values
Rules
Workflow
Output Templateという順番が書かれていました。
ところが、Workflowだけ存在していませんでした。
つまり、
「3番を読んでください」と書いてあるのに、3番が無い状態だったのです。
そこで、Output Templateに混ざっていた手順だけを取り出し、新しくWorkflow.mdとして分離しました。
ポイントは、
新しいルールは一切追加していないことです。
置き場所を整理しただけです。
本当に読まれているのか検証
整理しただけで満足してはいけません。
実際に記事を1本作ってもらい、
事前に決めていたチェック項目を確認しました。
- 記事の構成
- AIレビュー欄
- 内部リンク
結果はすべてクリア。
特にAIレビュー欄はWorkflow.mdにしか書いていない内容だったため、
新しく作ったWorkflow.mdが実際に読まれていることを確認できました。
今日、一番驚いたこと
記事作成中、ChatGPTはこう言いました。
「記事一覧CSVを参照できないので、内部リンクは作れません。」
慎重な判断だと思いました。
ところが、そのあと
「記事一覧CSVのタイトルを3つ教えてください」
と聞くと、
実在する記事タイトルを3つ返してきました。
つまり、
読めていました。
AIの「できません」も検証が必要だった
今まで私は、
AIの
「やりました」
という自己申告を疑っていました。
でも今日は逆でした。
「できません」
も、そのまま信じてはいけない。
AIは安全側に倒れて「できない」と答えることがあります。
その結果、
本当は作れた内部リンクまで作らなくなることがありました。
人間も同じだった
実は今日、
品質保証レビューでも同じことが起きました。
「自分に見えている情報が全部だ」
と思い込み、
3回連続で判断を間違えました。
どれも、
実際には情報が不足していただけでした。
今日の学び
今日分かったことは、とてもシンプルです。
人間もAIも、自己申告ではなく、実際の結果で確認する。
AIが
- 「やりました」
と言っても、
- 「できません」
と言っても、
本当にそうなのかは、実際の動作を見て判断する。
AIと仕事をするときは、この姿勢がとても大切だと感じました。
