「AI、これこういう風にやって」→パソコン「把握」　声と画面操作で教えるRPA機能、Windowsに搭載へ

　米Microsoftは5月21日（現地時間）、開発者向け年次開発者会議「Microsoft Build 2024」で、RPA・ローコードツール「Power Automate」の新機能「AIレコーダー」を発表した。AIに話しかけながら画面操作を記録させることで、PC操作の自動化をこれまでより柔軟に実現する機能という。

デモ映像のスクリーンショット

　Power Automateではこれまで、実際にマウスやキーボードでの操作を行い、それを記録することでPC操作の自動化を実現していた。一方、新機能では画面操作に加えて声での説明を踏まえ、AIが手順を構築可能に。AIは声での説明を基に、操作の意図を解釈して作業の手順を組み立てるため、例えばRPAの対象としていた画面のUIが変わったとき、新しい手順を再提案してくれるようになるという。

　YouTubeではデモ映像も公開。メール添付の請求書類から日にちや住所をコピー＆ペーストし、経費精算ソフトに入力する──といった操作を、声でAIに説明。自動化した際の手順を提案してもらう様子が確認できる。新機能は、まず6月中にパブリックプレビュー版として公開予定。

印刷する

SNSでシェア

関連記事

• 

  Microsoft、RPA機能を搭載した「Power Automate」発表　ユーザーの操作を記録、自動化

• 

  Microsoft、RPA機能でWindowsアプリ操作を自動化する「Power Automate Desktop」パブリックプレビュー開始　日本語版も

• 

  作業を依頼→Copilotが手順を考え、Windowsデスクトップで“自動RPA”　Windows 11に新機能「Power Automate via Copilot in Windows」

• 

  Microsoftのノーコード開発ツール「Power Automate」に文章でフローを生成できる新機能

• 

  Microsoft、自社製RPAツールを全Windows 10ユーザーに無償提供　マウスクリックやキーボード入力をGUIで自動化

こんなメディアも見られています

ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。

企業ITのトレンドを詳説

ITmedia エンタープライズ

エネルギーの専門メディア

スマートジャパン

建設×テクノロジーの最前線

BUILT

ビジネスと働き方のヒント

ITmedia ビジネスオンライン