［速報］マイクロソフト、PCに話しかけながら画面を操作するだけで生成AIがRPAフローを自動生成してくれる、Power Automate「AIレコーダー」発表

［速報］マイクロソフト、PCに話しかけながら画面を操作するだけで生成AIがRPAフローを自動生成してくれる、Power Automate「AIレコーダー」発表 マイクロソフトは、日本時間5月22日未明から開催中のイベント「Microsoft Build 2024」で、PCに話しかけながら画面を操作するだけでRPAフローを自動生成してくれる、Power Automateの新機能「AIレコーダー」を発表しました。 人間に操作を教えるように、AIに話しながら操作 これまでRPAフローを作成する方法として、マウスやキーボードなどの操作を記録することで基本的なRPAフローを作成することが可能でした。 今回発表された新機能「AIレコーダー」は、まるで人間に言葉で説明しながら業務アプリケーションの操作を教えるように、マウスとキーボードを操作しつつ音声で説明することで、どのような意図で操作しているのかを詳

[gabill]

今までRPAはUIが少し変わっただけでぶっ壊れたりと砂上の楼閣感あったけど、生成AIによって柔軟性が付与されたら今度こそRPAの時代が来るかもしれない

[kaiton]

ここまで業務を論理的にフロー図のように理解できている人がどれほどいるか？

[ntfs]

むしろフローを書いてくれる、って方向に活用したほうが効果あるかもしれない。

[kimuraxtax]

日本語音声にも対応してくれるよね……？

[iksmpic]

Power Automateは、音声じゃなくて文字インプットでもいいからもう少しわかりやすくしてほしいな

[so-apps]

MS強い。Appleは完全においていかれてる。

[tmatsuu]

操作の理由を音声入力で補うって発想が面白いな。よくこんな機能思いつくなと思った。えらい。

[bonnbonn1400]

職場でブツブツ煩いんだけど？って言われてしまうシーンを危惧

[kadkadkad]

自分のワークフローがブレブレなのを指摘されそうだ！

[jabberokkie]

OSの会社なんだから、LLMに自然言語オペレーションを求めるのが最も適切な活用だと思うんだよね！！待ってたこれ！！

[pekee-nuee-nuee]

プログラム書くのもしゃべりながらやったら提案の精度上がるとかなってほしいなあ

[IGA-OS]

正直なところ使ってみたい

[kei_1010]

もうアプリが不要になってwindowsを入れたらあとは「こんなゲームやらせて」って言えば自動でゲームを生成して、過去に遊んだゲームやプレイ内容も覚えてて次に生成するゲームの内容を好みのものにチューニング文字数

[fhvbwx]

まずWindows全般の予測不可能なタイミングで出てくる求められてない通知をどうにかしてからリリースしてほしい

[ToTheEndOfTime]

マイクロソフトはExcel以外は色々できそうなのに使い勝手が悪く、少しでも嵌ると路頭に迷う印象がある。大量に生成AI関連のアプリを出しているようですが、それぞれ品質は低いのでしょう。

[masahiko_of_joytoy]

PowerAutomate、何か凝ったことやろうとするとPythonのようでPythonでもない言語書くハメになるので、あれが自動生成されるならよさそう

[stabucky]

話すの苦手なんだよな。

[yk_mobile]

口頭でピボットテーブルでデータ組み合わせるの相談しながらやりたい。

[lbtmplz]

あまり期待しないで試してみるか…

[nori__3]

結局毎回同じ作業ができるかなんだよなぁ。ファイル保存するにしても相対パスとか絶対パスとかは考えてくれるの？それを口で説明するの？

[yamakaz]

メールの添付ファイル開くとか、マルウェアに狙われそう

[monegen]

他のRPAソフト潰しに来たな

[quality1]

今のPower AutomateクラウドのMicrosoft Copilotは相当ポンコツという評価なのでこれも8割引きで見てる。そのうちこういう未来が来ることは間違いないだろうけど実用段階は今ではない気がする

[yamanka00]

とうとうプロンプト書く必要すらなくなった…

[eagleyama]

API無料無くなってできなくなった、ツイート全消しとか自動投稿とか、作ってほしい

[misshiki]

“PCに話しかけながら画面を操作するだけでRPAフローを自動生成してくれる、Power Automateの新機能「AIレコーダー」”

[cpw]

これは確かにすごいな。学習はローカルで動くのだろうか、それともサーバ側なのだろうか。気になる。いつから使えるの？

[washi-mizok]

よーしよしよしいい子だいい子だよー

[kagerouttepaso]

きたー!!年内にもgithub Copilotも通話しながらペアプロ出来そうだなぁ

[kibitaki]

なんかすごい。関連ニュースだけでも嬉ションしそうだけど検証している時間がない。

[awawawann]

使いたい

[tonkas]

これえっぐいな