オンデバイスAIが変えるUXの前提
クラウド依存の知能から、端末上で動作するモデルを前提とした体験へ重心が移る。通信に左右されない低遅延、個人データが外部に出ない安心感、利用状況に応じて個別最適化される応答が標準仕様になる。UIは「サーバの結果を表示する画面」から「推論を中心に据えた対話的な面」に変容し、アプリは機能の集合ではなく、意図検出と状況理解を核にした協調システムとして再設計される。
リアルタイム性とオフライン自律性
UXで最も顕著な差は反応時間に表れる。入力から100ms前後以内の応答が維持できれば、音声・視線・ジェスチャのマルチモーダル操作が途切れず結び付く。ストリーミング推論を前提に、部分出力の逐次描画、キャンセル即時反映、モデル温存のためのプリウォームを組み合わせる。電波が不安定な環境でも要約、翻訳、分類、検索などの主要タスクが自律実行できるよう、コンテンツのローカルキャッシュと機能限定のフォールバックを設計に組み込む。
パーソナライズとアダプティブUI
個人文脈を活用するパーソナライズはオンデバイスで完結させるのが原則となる。アプリ内の操作履歴や端末内ドキュメントを埋め込み化し、軽量ベクターストアで意図推定と検索強化を行う。LoRAやアダプタを用いた小規模の追加学習、プロンプトテンプレートの動的最適化により、ユーザーごとの語彙、習慣、時間帯の傾向に適応する。UIは固定ナビゲーションから離れ、頻用タスクを前景化し、説明やガイドを要する機能は必要時にだけ露出する「アダプティブ密度」へ移行する。
マルチモーダル設計の実務
カメラ・マイク・タッチ・加速度などの入力を同時に扱う設計が一般化する。視覚モデルはシーン理解やOCR、音声モデルはウェイクワードなしの連続会話、テキストモデルは要約・生成を担う。各モダリティの確信度を統合する意図解決レイヤを設け、誤検出時のリカバリ手順（確認ダイアログ、やり直しジェスチャ、直近文脈の巻き戻し）を定義する。常時センシングに際してはオンデバイス前処理で機微情報を抽出・破棄し、可視化とスイッチで利用範囲を明確化する。
モデル最適化と資源管理
端末資源は有限であり、UXはモデル最適化の巧拙に直結する。量子化（8bit/4bit）、スパース化、蒸留、演算子融合によりメモリと電力を圧縮しつつ、品質の劣化を最小に抑える。NPU/GPU/CPUのヘテロ実行はOSのランタイム（Android NNAPI、iOS Core ML、ベンダー提供のアクセラレータ）を活用し、スレッド数とバッチを端末温度と電池残量に応じて調律する。長文生成はトークン速度と発熱の均衡を監視し、動的電圧・周波数制御と熱スロットリングに合わせたUIフィードバック（進捗、要点先出し）で待ち時間体験を設計する。
評価指標と継続的改善
精度と自然さだけでなく、遅延、ジッタ、消費電力、発熱、誤作動率を総合した指標が必要になる。端末上で匿名化・集計化したテレメトリと差分プライバシーを用い、個人データを外に出さずに効果測定を行う。A/Bテストはモデル・プロンプト・戦略の粒度でスイッチ可能にし、失敗時の即時ロールバックを前提化する。人間のフィードバックはオンデバイスで収集・適用し、フェデレーテッド学習等で集団知を抽出してグローバルモデルに反映する。
配布と更新のアーキテクチャ
アプリ本体とモデルを分離し、機能単位でダウンロード・差分更新できる構造が求められる。大容量モデルは分割配信とオンデマンド展開、ストレージ圧迫を避けるガーベジコレクション、旧端末向けの縮小版を同梱する。モデルとプロンプトは署名付きで配布し、端末側で検証・計測・段階的有効化を行う。実行時にはクラウド支援のハイブリッド経路を用意しつつ、ユーザーの同意とネットワーク条件に応じてシームレスに切り替える。
プライバシーとガバナンス
オンデバイスで完結すること自体がプライバシー保護になるが、設計上の配慮は不可欠だ。最小限収集、目的限定、保持期間の明示を徹底し、センシティブな推論はセキュアエンクレーブやTEEで保護する。モデル供給のサプライチェーンはハッシュ検証とリモートアテステーションで信頼性を担保し、脱獄・改ざん対策を講じる。安全性についてはハルシネーション抑制、プロンプトインジェクション耐性、コンテンツフィルタの多層化を実装し、説明責任と同意管理をUIで可視化する。
新しいUXパターンの具体像
通知とドキュメントの横断要約、次アクションの提案、フォーム自動補完などの「前倒し支援」は、ユーザーの主導権を奪わない制御UIとともに提示する。カメラ越しのリアルタイム翻訳や手順ガイド、音声の継続対話メモは、オフラインでも破綻しない軽量パイプラインで提供する。検索は質問意図と端末内知識を組み合わせたローカルRAGが標準化し、結果は根拠リンクとともに透明性高く表示される。ビジネスアプリでは、会議中の要点抽出、機密文書の端末内要約、現場作業の視覚チェックリスト化が生産性の新たな基準となる。
