AIで本当に業務効率化はできる?社内で使ってみた[AIアシスト<レポート分析>]
最近では、AIが急速に発展し生成AIツールが数多く誕生していますが、みなさんは業務の中でAIを活用していますか?情報漏えいなどのセキュリティの観点から、まだ業務で使うにはハードルがあり懸念している企業も多いのではないでしょうか。そんな中、learningBOX株式会社では、eラーニングシステム「learningBOX」でChatGPT連携の新機能「AIアシスト」をリリースします(2023年9月20日予定)。手軽で安全にAIを活用できるため、この機会にぜひお試しいただきたい機能です。
今回は、learningBOXメンバーに協力を仰ぎ、AIアシストを実際に体験してもらいました。この記事では、「レポート分析」についてのインタビューをご紹介します。
「教材の自動生成」についてのインタビュー記事はこちら
learningBOXの「AIアシスト」とは?
まず「AIアシスト」新機能について簡単にご紹介します。
レポート分析…提出されたレポートを模範解答に基づいてAIが分析。フィードバックコメントを自動生成し、レポート採点作業をアシストします。
教材の自動生成(クイズ・テスト生成、暗記カード生成)…learningBOXにアップした動画やPDF教材、WebサイトのURL等からワンクリックでクイズや暗記カードを自動生成できるようになります。
これにより、時間がかかりがちな問題作成やレポート採点の時間短縮が可能になり、オンライン社内研修や学校教育のスムーズな運営をアシストすることができます。
目次に戻る
「レポート分析」を使ってみた!インタビュー
今回インタビューしたのは、営業部サポート課の以下の2名です。
左から、営業部 サポート課 高島(東京支社所属) 柏原(本社所属)
東京⇔本社をオンラインで繋ぎインタビューを実施。新入社員研修のCS(カスタマーサポート)研修のシチュエーションを想定し、研修の問題作成~採点までの作業に「レポート分析」を使ってもらいました。
CS(カスタマーサポート)研修とは…learningBOXの新入社員研修の一つで、実際にあったお客様からのお問い合わせ内容を題材に、learningBOXのカスタマーサポートとしてどのように返答するのが望ましいのかを学ぶレポート課題です。learningBOXの学習管理システムを使ってレポートを提出し、先輩社員が一問一問採点してフィードバックをするというものです。learningBOXとQuizGeneratorそれぞれのサービスに関する問題数は50問以上に及び、苦戦する社員が続出している難関研修です。
レポート課題で採点者がこれまで抱えていた問題とは?
お二人がレポートを採点するにあたって、これまで抱えていた問題について教えてください。
高島:レポート課題の採点をする際、合否の判断だけでなくフィードバックコメントも書くのですが、自身で答えを導き出せるようヒントを加えつつ、分かりやすい文章を0から作らなければなりませんでした。そこが毎回難しくて時間がかかってしまっていました。
また、一社員につき計50問以上の回答が届くのですが、業務の合間を縫ってその量の合否判断&フィードバックをしなければならないため、いつの間にか採点待ちのレポートが溜まってしまうこともありました。
柏原:レポートの回答は人によって言い回しが違うので、ポイントを正しく押さえているかを一つ一つ確認するのに時間がかかっていました。
1問の採点に5分かかっていたのが1分に短縮?!
実際にレポート分析を使ってみてどうでしたか?良かったところを教えてください。
柏原:まず「ついにAIの時代が来たか~!」と思いましたね(笑)。それはさておいて、AIが自動で模範解答との類似度を提示し、フィードバックコメントも作成してくれるので、正解のポイントを正しく記入しているかをすぐに判断できるようになったのが良かったですね。
そのおかげで1問採点するのに5分はかかっていたところを、感覚的には1分くらいに短縮することができたように思います。例えば問題数10問なら、50分かかっていたところを10分くらいに短縮できるかもしれないですよね。
AIが作成するフィードバックに関しても、ポイント毎に「この文言が欠けています」「ちゃんと書けています」など的確なので、判断材料としては問題なく活用できる印象です。
あと「レポート受付時に分析」という項目に予めチェックを入れておけば、採点画面を開いたときにはすでにAIが分析した回答が表示されているので、これも非常に便利だなと思いました。
「レポート受付時に分析」にチェックをしておくと、採点するときにはAI分析が完了している状態になるので時短になります
高島:操作が簡単で、レポート課題の作成を素早くできた点も良かったです。基本的に、通常の問題作成のフローに模範解答を追加するだけでした。分析もスピーディに示してくれるので全体的に時間短縮になると思いました。
柏原さんが言われるように、AIが提示してくれるフィードバックの文章も的確なものが多く助かりました。例えば、説明が不足している回答の場合でも具体的なアドバイスを入れて文章にしてくれるんです。その文章をコピーして編集すればよいので、とてもスムーズでしたね。
▼レポート課題の作成もこんなにスピーディー!
▼レポート分析を使った成績画面
社内研修だけでなく、各種試験や試験対策にも活用できそう!
今回はCS研修のレポート採点シーンで使ってみていただきましたが、他にどんなシーンでレポート分析を活用できそうでしょうか?
高島:大学や資格取得のスクール、社内研修などに加えて、介護業界や建設業界などの正確性が求められる業界は研修を受けた後にレポート課題があるため、そのようなシーンでも活用できそうです。他にも、採用試験や昇進試験、また試験対策でも利用できるのではないかと思いました。
柏原:learningBOXには診断テストの機能もあるのですが、お客様からは「診断テストを作成するのが難しい」という声をいただくことがあります。確かに、診断テストは統計学などを学んでいないと一から作るのは大変です。AIアシストを使ってみて、やはり分析が長けていると感じるので、診断テストにもAIアシストが搭載されるとさらに便利になるのではと思いました。
気になった点や改善ポイントは?
実際に使ってみて気になった点や改善してほしいところはありましたか?
柏原:今後の改修で改善されるかもしれませんが、現状ではレポート課題の回答文字数が1,000文字までしか入力できないのがネックかもしれません。例えば、大学のレポート課題の場合を想定すると足りないかなと感じました。
あとは「模範解答との類似度」の数字の根拠も必要だと感じています。というのも、模範解答をそのまま回答すると当然100%と出ますが、その模範解答から文言の足りない回答をいくつか作成して試してみると、85%前後が多くなるという結果になりました。数字のバラツキもあり、何を根拠にその%になっているのかが客観的に分かると説得力が増すと思いました。
「模範解答との類似度」として正解率が表示されます
さらに、模範解答以上の回答を出してみるとどうなるかについても試してみたところ、85%という正解率でした。これはAIが模範解答と比べてしまうので、それに対しての85%になってしまうのだと思いますが、人が採点していたら加点ポイントとなるところです。そう考えると「AIはあくまでアシスト」というスタンスが無難と感じました。
あと、最初は入力形式に迷うかもと思うところがありました。課題の提出方法の入力形式ですが、「テキスト入力」を選択しないとレポート分析が使えないので要注意です。
レポート分析を使用するには、「テキスト入力」を選択してから「AIレポート分析(ベータ版)を利用(テキスト入力のみ)」にチェックを入れましょう
高島:CS研修では回答のフィードバックにヒントとなるURLや画像(スクリーンショット)を貼ることが多いので、ぜひこれは挿入できるように進化してほしいと思っています!
今後、実際にこの機能を業務で使っていきたいと思いますか?
柏原:はい、ぜひ!learningBOXとQuizGeneratorのレポート課題を合わせると50問以上あるので、日々の業務をしながら採点するのは結構ハードですからね。
現段階では、AIにレポート採点を完全に頼り切ることは難しいレベルではあると感じています。ですが、それでもかなりの時間短縮にはつながるので、今後ぜひ使っていきたいです。夏入社以降のCS研修で本格的に使ってみようと思っています!
目次に戻る
まとめ
今回は、レポート分析について高島と柏原のインタビューをご覧いただきましたが、いかがでしたでしょうか?
「AIはあくまでアシスト」その観点を持ちながらうまく有効活用していくことで、今まで時間がかかってしまっていた仕事を効率よく回せるようになるのは朗報ですよね!
まだまだAIの精度については課題はあるものの、きっとレポート課題採点のアシストとしてお役立ていただけるものと確信しています。
現在QuizGeneratorのページ上で、短いお題やクイズを作成したい内容が記載されたURL等を入力するだけで、AIがクイズを自動生成する「AIでかんたんクイズ生成」サービスも無料公開しています。9月のAIアシスト機能リリースまで、こちらでもぜひAI体験をお楽しみください。
▼こちらもおすすめ!あわせて読みたい
目次に戻る