試作の画面を、AI に使う人の役をさせて確かめたら見つかったこと

試作の画面や機能の案は、本物の利用者に見せる前に、AI に使う人の役をさせて確かめています。2026 年 4 月 4 日と 5 日、当社が作っていた業務のアプリ（日報、営業の記録、顧客と案件の登録）の試作を、AI に 4 人の役をさせて評価しました。若手の営業の役は、内容の欄に一言だけ書いても保存できてしまう抜け道を見つけています。

ただし、AI の評価は架空の人物の意見です。採るかどうかを決めるのは人で、最後は本物の利用者に試してもらいます。

4 人の役を、別々に評価させました

3 人の役には、機能の案 19 個を S・A・B・C・D の 5 段で別々に評価させ、その後で結果を 1 枚の表にまとめさせました。若手の営業の役には、第一印象、記録の入力、スマートフォンで使えるか、サボれるところ、顧客や案件を登録する気になるか、見た目の感想、「使ってもいいかな」と思う条件、の 7 つの観点で画面を見てもらいました。

役の設定は、次のような書き方で AI に渡しています（例です）。

あなたは、従業員 20 名の会社で現場の作業を担当している 52 歳の社員です。
パソコンは苦手で、スマートフォンは LINE とカメラだけ使います。
日報を書くのは面倒だと感じていて、上司に見張られるのは嫌です。
この立場で、下の機能の案を 1 つずつ、S・A・B・C・D の 5 段で評価してください。
評価ごとに、その理由を、この人が言いそうな言葉で 1〜2 文書いてください。

立場、道具の得意さ、仕事への気持ちの 3 つを書くと、評価の理由がその人らしくなります。点数だけを出させず、理由を必ず書かせるのは、あとで人が評価を読み直したときに、なぜその点なのかを確かめるためです。こうした頼み方は、プロンプトの書き方の 1 つです。

3 人の評価で、案を 5 つの組に分けました

くじ引きのような演出は、3 人とも低い評価で、子ども扱いされていると受け取られるという理由が並び、不採用にしました。音声での入力は、現場の担当者の役が、人の前で話すのは恥ずかしく使えるのは 1 人のときに限られると評価し、意見が割れた組に入っています。

3 人に共通していたのは、入力の手間を減らすより、入力そのものをなくす案を高く評価したことです。予定表やメールから自動で記録する、AI が日報を書く、チャットで送るだけ、といった案です。

若手の営業の役が見つけた、4 つのこと

いちばん役に立ったのは、1 つ目の抜け道です。観点に「サボれるところ」を入れていたので、AI の役は入力の確認の甘いところを探しにいきました。内容の欄は空でなければ保存できる作りになっていて、一言だけでも通ってしまうことが分かりました。本物の利用者に見せてから気づくより、ずっと早く直せます。

一方、ホームの画面に今月の成果の数字が大きく出ることを、若手の営業の役は、上司に見られているようで重荷だと受け止めました。経営者が見たい数字ほど、見られる側には重く感じられます。同じ画面でも、見る立場で受け止め方が変わる点は、役を分けて評価させたことで見えてきました。

AI の役に頼むと得意なことと、人が確かめることが分かれます

AI の役の言葉は、もっともらしく、感情もこもって聞こえます。それでも、本物の利用者の声ではありません。当社は、AI の役の意見を、お客様の声として使うことはしません。社内で案を絞るための材料として扱い、意見が割れた案は「検討」に回して、本物の利用者に試してもらうときの確かめどころにします。AI はもっともらしいことを言う道具でもあるので（ハルシネーション）、評価の理由が試作の画面の事実と合っているかも、人が見て確かめます。

頼むときのこつは 3 つです。立場の違う役を用意し、別々に評価させること。点数と理由を必ずセットで書かせること。そして、抜け道やサボり方を探す観点を入れることです。

当社の業務のアプリは、この評価のあと、チャットでの入力を中心に組み直しました。その理由はチャットで入力する作りにした記事に書いています。AI に役を演じさせる使い方は、用語集のロールプレイにもまとめました。業務の試作や社内の仕組みづくりに、こうした確かめ方を組み込む進め方は、AI伴走支援でもお手伝いしています。