WinActorで生成AI連携　 ～シナリオひな型作成機能におけるプロンプト検証の実例と比較まとめ～【連載第一弾】

WinActor ver7.5から生成AI(OpenAI、または、Azure OpenAI)と連携する機能が追加され、生成AIを利用してシナリオのひな型を作成できるようになりました。

今回はシナリオひな型作成機能を複数のパターンのプロンプトで試し、それぞれの実行結果（生成AIによって作成されたシナリオ）をまとめてみたので、以降3回のコラムに分けてお届けします。最終回では、結果を比較し考察したいと思います。

連載のスケジュールは以下の通りです。
第１回 　WinActorの生成AI連携機能でシナリオ作成してみた（今回）
第２回　 プロンプトを2パターン試してみた
第３回　 プロンプトを再実行してみた結果とこれまでのまとめ

WinActorの生成AI連携機能でシナリオ作成してみた

はじめに

シナリオひな型作成機能に興味はあるけれど「実際の利用料(消費される生成AIのトークン数を含む)の目算が立たない」として試せていない方や、DX推進やRPA利用ガイドラインを策定する立場で「本機能を有効化すべきかどうか」という点で機能の有用性について気になっている方もいらっしゃるのではないでしょうか。

第1回は、実際に生成されたシナリオの全体像と、要所要所の処理を詳しく載せています。
実例を見て「思ったより完成度は高くないな」と感じるか、「想定以上の精度の高さだ」と感じるか―、各々の期待値によって、評価は大きく変わると思います。
今回生成されたシナリオの完成度に対する評価は読者の皆様に委ねますが、記事のおわりで述べている結論のとおり、初心者にとって本機能はシナリオ作成の初期段階で抱える問題の一部を解消し得る反面、効率的な開発の手段として使いこなすには技術的な（部品の用途やプロパティ設定などに関する）知識が必要、というのが現在の所感です。

今後、機能を試したり利用方針を検討したりする際に、ヒントとなれば幸いです。

本記事で扱うWinActorの生成AI連携機能について

WinActorの生成AI連携機能として、シナリオの中で生成AIを呼び出して応答を利用するサブシナリオも追加されましたが、これからご紹介するシナリオひな型作成機能はシナリオ新規作成時に使用する機能で、日本語で記述した業務手順を基に生成AIが大まかな処理の流れを自動で生成してくれるものです。

WinActor　生成AIを利用したシナリオひな型作成

WinActor Ver.7.5より生成AIと連携してWinActorシナリオひな型作成ができるようになりました。OpenAIまたは、Azure OpenAIを利用したシナリオファイルのひな型機能を追加しました。

本記事で扱う生成AIについて

モデルは、従来モデルと比較して低コストで利用できるGPT-4o-miniを選択しました。

事前準備

Azure OpenAIとWinActorを連携するには、Azure のアカウント作成後、リソースの作成とモデルのデプロイをし、Azure OpenAIのAPIキーを取得する必要があります。

生成AI連携でシナリオひな型を作成してみた

次のような作業を自動化すると仮定して、まずはシナリオを生成してみます。

自動化したい作業

作業概要

Excelファイルに記載された社員1人分の交通費の情報を読み込んで、経費精算システムに使用日ごとに入力し全ての明細を追加した後、申請する。

作業手順

1. Excelを開いてEdgeブラウザを起動し、経費精算システムの画面を開く。
2. Excelのデータ(使用日・金額・交通機関・区間From・区間To・往復・訪問先・摘要)を読み込んで、経費精算システムに入力し、追加ボタンをクリックして明細を追加する。
3. 全ての明細の追加が完了したら、申請ボタンをクリックする。
4. Excelを保存しないで閉じる。

プロンプト

WinActorの[ファイル]>[新規作成]>[新規作成(生成AI利用)]からプロンプトの入力画面が起動します。
入力画面に記載した内容は以下のとおりです。

シナリオと同じフォルダにあるExcelファイル「経費申請データ.xlsx」を開く。
Edgeブラウザを起動し、経費精算システムの画面を開く。
ExcelファイルのA列の使用日とB列の金額、C列の往復、D列の交通機関、
E列の区間From、F列の区間To、G列の訪問先、H列の摘要の値を取得する。
取得した値を経費精算システムの「使用日」と「金額」、「区間From」、
「区間To」、「訪問先」、「摘要」の各欄に入力する。
取得した往復の値が〇の場合、経費精算システムの「往復」欄にチェックを入れる。
「交通機関」欄は、取得した値と同じラジオボタンを選択する。
追加ボタンをクリックして明細を追加する。
全ての明細の追加が完了したら、申請ボタンをクリックする。
Excelファイルを保存しないで閉じる。

生成されたシナリオ画像

【処理概要①】　Excelを開いて、経費精算システムのページを表示する

【処理概要②】経費精算システムへ入力するデータをExcelから取得する　(繰り返し処理：前半)

【処理概要③】取得した値を経費精算システムの各項目へ入力し、明細を追加する。全ての明細の追加が完了するまで繰り返す(繰り返し処理：後半)

【処理概要④】申請ボタンをクリックして、Excelとブラウザを閉じシナリオを終了する

生成されたシナリオの結果まとめ

上記プロンプトによって生成されたシナリオの結果についてまとめたいと思います。

サマリ

終わりに

WinActorの生成AI連携におけるシナリオひな型作成機能についてご紹介し、実際にプロンプトを実行してみました。今回実行したプロンプトは処理の制御構造が問題なく生成され、無駄な処理がなく、変数もほぼ過不足なく追加されました。

本機能を使うことで、初心者はシナリオ開発の初期段階におけるハードルを下げることができます。

【初心者のよくある問題】

• WinActorで行いたい操作（手作業手順）をどのような部品や処理（部品の組み合わせ）で実現できるか見当がつかない
• どこで繰り返し、どこで分岐させる、といった全体の処理の流れを考えて組み立てることができない

開発に慣れていないユーザは上記のような問題により、0から処理を作成する事に苦手意識を持つ事がありますが、作業手順から大体の処理の大枠を生成することができる本機能は、まさに2つ目の問題に対して有効な手段と言えそうです。一方、不適切な部品やプロパティ設定も生成され、ユーザが正しくない処理を特定し修正することを前提とした機能である点を踏まえると、部品の用途や使い方について十分な知識がない状態で本機能をアテにしてしまうと、思うように開発が進まなくなる（部品の差し替えや処理/プロパティ設定の変更を必要とする箇所を特定し対応する作業で時間を要する）可能性があります。

初心者が1つ目の問題をカバーする目的で本機能を利用するのは得策とは言えませんが、裏を返せば、そのあたりの知識が増えてきてから本機能を活用すれば、シナリオ作成をぐんと効率化できそうです。

初心者の方は、処理の全体の流れなどマクロな観点の作成においては本機能を活用し、全体の中のミクロな処理のつくり込みは従来の自動記録機能を用いる、といったように機能の使い分けをされると良いのではないでしょうか。

第1回の「WinActorの生成AI連携機能でシナリオ作成してみた」についてはここまで。第2回「プロンプトを2パターン試してみた」では、プロンプトを2回変えて実行し結果を比較してみます。