【Qiita】【UI-TARS-desktop】自然言語でPC操作！ByteDance発AIエージェントで業務自動化

「画面を開いて、この項目を入力して」と文章で頼むと、AIがPCの画面を見て操作する。ByteDanceの公開プロジェクト「UI-TARS Desktop」は、そんな画面操作エージェントを試せるデスクトップアプリです。紹介記事は、関連するAgent TARSの機能や活用例も取り上げています。

開発元の説明では、UI-TARS Desktopはローカル・リモートのPCやブラウザー操作に対応します。ただし、アプリが自分のPCで動くことと、判断に使うAIモデルまで手元で動くことは別です。選んだモデルや接続先によって、画面や入力の情報が外部へ送られる場合があります。

自動操作は便利ですが、誤ったクリックや入力も起こり得ます。権限と接続先を確かめ、送信・予約・支払いのような重要な操作は結果を人が確認しましょう。元のQiita記事はAIによる自動生成で、内容に誤りがある可能性を明記しています。