豆包手机助手消費者版がリリース、AIによる自動操作の制御プロトコルも導入

豆包手机助手の消費者版が正式にリリースされました。

IT之家が報じたところによると、今回の消費者版はプレビュー版に比べて安定性と日常的な使いやすさが強調されており、対話体験に重点が置かれています。起動方法には音声や専用のAIボタンなど複数の手段が用意されており、指紋認証機能を備えたAIボタンを使用すれば、本人確認後に再ロック解除することなくタスクを実行できます。また、遠距離や騒音環境下での音声起動についても最適化が行われました。

新機能として、画面上の内容に基づいた回答能力が追加されました。ユーザーはスクリーンショットを撮ったりアプリを切り替えたりすることなく、現在の画面内容を基にタスクを処理させることが可能です。例えば、カメラで室内を映しながら特定の条件に合う家具を検索させると、画面と要求を組み合わせて電子商取引プラットフォームから商品を提示します。さらに、写真、ショートメッセージ、メモなどのローカルデータを検索するツールも提供されており、通行証の有効期限などの情報を端末内から見つけ出すことができます。

録音体験の向上に加え、飞书妙记の機能が統合されました。ローカル検索ツールと組み合わせることで、過去のインタビュー内容などの具体的な詳細を追及することが可能です。また、音声入力や三本指でのスワイプアップ、AIボタンと音量ボタンの同時押しによって、現在の画面内容を手動で保存し、ローカルで検索可能な記憶として残せます。

「スマートフォンの操作」機能はベータ版として提供されます。これに伴い、オープンで規範的なAIアプリケーション生態系の構築を目指し、画面自動操作宣言プロトコル（SAEP）が導入され、30日間のルール公示が開始されました。このプロトコルにより、サードパーティ製アプリはAI助手による自動操作を許可するか拒否するかを自主的に宣言でき、開発者の意向が尊重されます。データ収集と処理については「合理的かつ必要」および「ユーザーによる自主制御」の原則に従い、操作範囲を階層的かつ段階的に管理するエージェント保護体系が構築されています。

この消費者版を最初に搭載する端末は努比亚 NaviX Ultraであり、現在は予約受付中で、9月16日に正式に発売されます。

ITHome の報道。