近期、豆包（ダーバオ）ワークのパソコン操作能力がアップグレードされ、画面クリックの精度と速度が向上し、より正確かつ高速になりました。会話の中でパソコン操作に関するニーズを直接伝えると、ユーザーの許可を得た後、豆包ワークが自動的にパソコンの画面を確認し、人間のマウスとキーボードの操作を模して関連アプリを操作できます。同時に、従来のアプリをまたぐ操作やブラウザ操作のスキル録画に加えて、ユーザーは現在パソコン操作を録画し、デモの過程を再利用可能なスキルとして保存できるようになりました。さらに、パソコンの操作が必要なタスクは、Macがロックされた後も実行を継続でき、ユーザーはスマートフォンからタスクを指示したり、結果を確認したりすることもできます。
対話画面の「その他のスキル」から「操作を録画してスキルを生成」を見つけ、案内に従って認証を完了すると、ユーザーは普段どおりパソコンを操作しながら、音声で要望を補足できます。例えば、ファイルを整理する際に「このフォルダーだけ整理して、ファイルは日付で命名する」と説明すれば、操作範囲と命名ルールをまとめて伝えることができます。録画中、豆包工作はマウスのクリック、入力した文字、ウィンドウの内容を記録し、ユーザーはいつでもキャンセルできます。使用する際は、アカウントのパスワードなどの機密情報を見せないようにしてください。
録画が終わると、豆包ワークは操作フローと解説を個人のスキルとして整理します。次に同じ種類のタスクを実行する際に対応するスキルを選び、今回処理したい対象と要件を伝えるだけで、操作手順を繰り返し説明する手間が省けます。これにより、複数ステップの操作、臨時の条件、処理の習慣を、一度のデモから呼び出し可能なスキルとして蓄積でき、同種タスクの繰り返し説明を減らせます。
タスク実行の面では、ユーザーは「設定 → ワークタスクモード設定」から「豆包（ダーバオ）のロック画面時の動作を許可」をオンにできます。この機能を有効にし、ユーザーの許可を経た後、Macがロックされている間でも、パソコンを操作する必要のあるタスクを豆包が実行し続けることができます。パソコンから離れる際には、スマートフォンからこのロックされたMacにタスクを指示し、スマートフォン上で結果を確認することもできます。パソコンの前に戻り、ロック解除すれば、いつでも操作を引き継げます。連続して実行する必要があり、かつパソコンの前にずっと居続けるのが難しいタスクに対して、この機能はより柔軟な実行方法を提供します。
Macのロック後も、豆包はパソコンの操作を必要とするタスクの実行を継続できる（画面イメージ）
使用時、Mac は電源オン・ネットワーク接続を保ち、豆包クライアントを継続的に実行し、デバイスをスリープさせない状態にしておく必要があります。
AIエージェントが実際の業務シーンへと広がるにつれ、Computer Useはソフトウェアの操作やタスク実行における重要な能力になりつつある。今回の豆包(ダーバオ)ワークのアップグレードにより、ユーザーが使い慣れた操作方法を再利用可能なスキルとして保存できるようになり、さらにMacがロック画面状態になってもタスクの実行を継続できるようになった。これにより、繰り返しの指示やパソコンの前に張り付く負担を軽減できる。一般ユーザーにとっては、繰り返しの操作の一部をAIに任せ、判断や創作、経験を要する仕事にもっと時間とエネルギーを充てられるようになり、AIが生産性を解放する価値が日常のワークフローに徐々に浸透していくことを意味する。
雷峰网（公式アカウント：雷峰网） 雷峰网