「AI、これこういう風にやって」→パソコン「把握」 声と画面操作で教えるRPA機能、Windowsに搭載へ
米Microsoftは5月21日（現地時間）、開発者向け年次開発者会議「Microsoft Build 2024」で、RPA・ローコードツール「Power Automate」の新機能「AIレコーダー」を発表した。AIに話しかけながら画面操作を記録させることで、PC操作の自動化をこれまでより柔軟に実現する機能という。
デモ映像のスクリーンショット
Power Automateではこれまで、実際にマウスやキーボードでの操作を行い、それを記録することでPC操作の自動化を実現していた。一方、新機能では画面操作に加えて声での説明を踏まえ、AIが手順を構築可能に。AIは声での説明を基に、操作の意図を解釈して作業の手順を組み立てるため、例えばRPAの対象としていた画面のUIが変わったとき、新しい手順を再提案してくれるようになるという。
YouTubeではデモ映像も公開。メール添付の請求書類から日にちや住所をコピー＆ペーストし、経費精算ソフトに入力する──といった操作を、声でAIに説明。自動化した際の手順を提案してもらう様子が確認できる。新機能は、まず6月中にパブリックプレビュー版として公開予定。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
「Xが情報収集に役立たない……」熊本地震で不満の声続出 「Twitterを返して」
-
2
メルカリ、梨の転売疑惑に「盗品の出品は確認されず」 誹謗中傷には利用制限も
-
3
「こんなのに追われたら……」急斜面もやすやす爆走、中国製の車輪付き四足ロボのデモ動画が話題 最高時速20km超
-
4
検索結果に「詐欺ではありません」と表示させる詐欺手口、警視庁が注意喚起 AI要約も餌食に
-
5
Z世代に聞く次の流行、「AIイラスト」が1位に 「Claude Code」も上位
-
6
東野圭吾さん死去、Xなどで追悼相次ぐ 「ガリレオ」など数々の人気作、エンジニアから転身
-
7
NVIDIAやMicrosoftなど30社超、オープンAIの防御ツール共同開発の「Open Secure AI Alliance」設立
-
8
「あ、その情報メモしたい！」を叶えるワイヤレスイヤフォン、Nothing「Ear (3a)」
-
9
はてな、11億円流出の調査報告書を公開 偽警察、口外禁止、残業・休出200時間超、孤立……ほころびが連鎖
-
10
有識者はGoogleやX、Meta、ドワンゴを名指しで批判……総務省、偽広告や誹謗中傷に発信・拡散前の対策求める
ITmedia NEWS SNS
@itmedia_newsをフォロー
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR