なぜApple Watchは「事故」を確信できるのか? マルチモーダルAIによる高精度衝突検出システム (US12485842B2)

Apple特許

ドライブ中、予期せぬ事故に遭遇し、意識を失ってしまったとしたら――。誰もいない夜道や人通りの少ない場所で、自力で助けを呼べない状況は、ドライバーにとって最大の恐怖の一つです 。こうした「万が一」の事態に、私たちが普段持ち歩いているスマートフォンやスマートウォッチが自動で救助を要請してくれる。そんな安心安全な世界が、今まさに実現しようとしています。

今回ご紹介するのは、Appleの「モバイルデバイスにおける衝突検出(Crash Detection On Mobile Device)(US12485842B2)」です 。この特許には、単に「衝撃があったら通報する」という単純な仕組みではなく、デバイスに搭載されたあらゆるセンサーを駆使し、高度なAIが状況を判断する「執事」のようなインテリジェンスな姿が見えてきます。

この記事では、この技術の内容について、特許図面と技術ポイントからわかりやすく解説します。

(この記事にない図面は、この特許の出願公開 US20240075895A1 からご参照ください。)

発明の概要

この発明の核となるのは、複数のセンサー情報を統合して判断する「マルチモーダル・シグネチャー」の活用です 。モバイルデバイスには、加速度センサー、マイク、気圧計、GPSといった多様なセンサーが搭載されています 。これらから得られる膨大なデータを、機械学習モデルによって解析し、エアバッグの展開や車両の横転といった「重大な衝突」の予兆をミリ秒単位で捉えます 。

特筆すべきは、単一のデバイスだけでなく、iPhoneとApple Watchのように「複数のデバイス」が連携して精度を高める仕組みが含まれている点です 。これにより、日常生活でのスマホの落下といった「日常的な衝撃」と、生死に関わる「重大な事故」を、かつてない精度で切り分けることが可能になりました 。

発明のポイント

ここからは、本特許の重要図面を見ながら、その仕組みを詳しく解説します。

事故発生から通報までのカウントダウン

まず、事故が起きた際にシステムがどのように振る舞うかを見てみましょう。FIG.2のタイムラインによれば、時刻 t=0 で衝突が検出(201)されると、約15秒後にデバイスの画面に「健康チェック」の通知が表示されます(202) 。ここでユーザーが応答すれば救助要請やキャンセルが可能ですが、N秒間(例えば30秒)無反応だった場合、ついに音声アラートとともにカウントダウンが始まります(203) 。そしてカウントダウン終了後、自動的に119などの緊急サービスへ発信が行われるのです(204) 。このように「段階的なエスカレーション」によって、ユーザーの意思を尊重しつつ、確実な救助を実現する鍵となっています。
(正確な図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)

衝突を判定するデバイスシステム

上図は、FIG.3 のシステム構成図です。デバイスの内部では、常に低電力プロセッサ(301)が監視を行い、大きな衝撃などの「トリガー」を待ち構えています 。トリガーを検知するとメインのアプリケーションプロセッサ(302)が起動し、各センサー(IMU、オーディオ、気圧、GPS)のバッファからデータを抽出(306)します 。これらが複数の機械学習モデル(307)にかけられ、最終的に推論エンジン(308)が「これは重大な事故だ」と予測値を出すことで、SOSステートマシン(303)へと繋がります 。
(正確な図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)

センサーがとらえる衝撃のシグネチャー

デバイスはどうやって事故と判断しているのでしょうか。

Fig.4B(上図)は、IMU(慣性計測ユニット)がとらえる急激な減速パルスです。特定の強さで持続的に発生するパルスが「衝突のシグネチャー(痕跡)」として定義されています 。(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)

Fig.4Dは(実はこれが非常に重要です)、車内でエアバッグが展開すると、車内の気圧が一時的に急上昇します。気圧計がこのシグネチャーを捉えることで、物理的な衝撃を裏付けます。(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)

Fig.4Eは、高速で移動していたデバイスが、自動車事故により瞬時に低速または停止状態になる様子をGPS計測したデータです。

このように様々なセンサーからのデータが組み合わさることで、確実性が飛躍的に高まります 。(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)

図面の説明

Fig.1:スマートウォッチのインターフェース(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
FIG.1は、衝突検出時のスマートウォッチ(100)上でのユーザーインターフェース(101)です。混乱した状況でも操作しやすい設計が示されています 。

Fig.4A:センサーと検知モード(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig4Aは、センサーの種類と観測される信号の対応表です。IMUやGPS、マイク、気圧計がどのような役割を果たすかが網羅されています 。

Fig.4C:衝突を示す大きな音響信号(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.4Cは、マイクがとらえる衝突音のグラフです。環境音から突発的な大音量への変化を監視します 。

Fig.5A~Fig.5C:衝突時の減速パルスの確率とピーク減速度(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.5AおよびFig.5Bは、IMUによる衝突時の加速度の変化をより詳細に示したものです。Fig.5Aは慣性加速度のグラフであり、Fig.5Bは水平加速度のグラフです。
Fig.5Cは、クラウドソースで集められた膨大なデータに基づく、減速パルスの確率とピーク減速度のヒストグラムです。ピーク加速度が5Gを超える場合、減速パルス特性は衝突の良好な指標となることが分かります。

Fig.6A~Fig.6B:エアバッグのピーク圧力擾乱の確率とピーク圧力(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.6Aは、衝突時にエアバッグが展開したときの、エアバッグ圧力シグネチャーの公称プロファイルです。
Fig.6Bは、クラウドソースで集められた膨大なデータに基づく、ピーク圧力擾乱の確率とピーク圧力のヒストグラムです。エアバッグ圧力特性は、圧力が約0.5kPaを超えると衝突の良好な指標となることが分かります。

Fig.7A~Fig.7B:衝突時の音圧レベルのバースト持続時間の確率と持続時間(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.7Aは、衝突時の音圧レベル(SPL)を示すグラフです。
Fig.7Bは、クラウドソースで集められた膨大なデータに基づく、200ms以内に130dBを超える音圧レベルの衝突の確率と持続時間のヒストグラムです。エアバッグの展開音や金属・ガラスの破砕音は音響シグネチャーとして利用できます。

Fig.8:SOS信号を発するステートマシン図(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
FIG.8は、SOS信号を発するためのステートマシンの遷移図です。待機(801)から潜在的事故(802)、通知(804)へと進む論理フローが描かれています 。

Fig.9A~Fig.9B:衝突検出後にユーザーに安全に通知するためのタイムライン(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.9A、9Bは、ユーザーが事故後に車を安全な路肩へ移動させる時間を考慮し、デバイスが完全に「静止」してから通知を出すインテリジェントな待ち時間の制御について記述されています 。

Fig.10:複数のデバイスが連携して衝突を検知する(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.10は、iPhone(1002)とApple Watch(1001)が互いにデータを交換し、どちらがメインで通知を出すかを「調停」する連携機能の説明です 。

Fig.11:衝突検出用のソフトウェアスタック(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.11は、OSレベルでどのようにデータが流れ、フローコントローラー(1101)が各層を制御するかが示されています 。

Fig.12A~Fig.14B:マルチモーダル衝突検出のための時間調整のエポッキング(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.12A~Fig.14Bは、複数のセンサー間で発生するデータの「ズレ」を修正するための、エポック(時間区切り)の整列とマッチングの技術的詳細です

Fig.15~Fig.16:複数デバイスの衝突装置上の遅延処理(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.15~Fig.16は、遠隔デバイス(iPhoneなど)からのデータ到着を待つためのディレイバッファ(1600)の仕組みです。

Fig.17~Fig.21:画像データ処理回路のブロック図(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.17~Fig.21は、現場で収集された匿名データをサーバーにアップロードし、アルゴリズムを継続的に改善する「クローズドループ・システム」のアーキテクチャです。OTA(無線アップデート)によるパラメータ更新の流れが説明されています 。

Fig.22:衝突検出プロセス全体のフローチャート(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.22は、衝突検出プロセス全体のフローチャートで、検出から判定、通知までの手順がまとめられています。

Fig.23:衝突装置アーキテクチャのブロック図(図面は、この特許の出願公開 US2024/0075895A1 をご参照ください)
Fig.23は、プロセッサ(2304)、各種センサ(2310など)や各種通信サブシステム(2324)など、本機能を実装するためのハードウェア構成図です 。

応用可能性

この特許技術は、自動車事故に留まらず、多様な「緊急事態」の検出に応用できる可能性を秘めています。例えば、独居老人の転倒検出、スポーツ中の負傷、あるいは自転車や電動キックボードでの事故など、加速度と音響を組み合わせた判定は多くのシーンに適合可能でしょう。

また、車両側のシステム(CANバスなど)と直接連携しなくても、モバイルデバイス単体で高精度な衝突検出が行えることは、古い車種に乗るユーザーにとっても大きな恩恵となります。

まとめ

  • 加速度、音圧、気圧、GPS速度という複数のセンサー情報を統合し、機械学習モデルによって重大な車両衝突をミリ秒単位で高精度に判定します 。
  • デバイスの静止状態を確認してから救助要請の通知を行う仕組みや、iPhoneとApple Watchの連携により、日常生活の衝撃による誤検知を徹底的に排除しています 。
  • 衝突検出時のユーザーの反応やセンサーデータをクラウドで解析し、アルゴリズムのパラメータを無線アップデート(OTA)で継続的に改善するクローズドループ・システムを備えています 。

最後までお読みいただきありがとうございました。

特許情報

特許番号:US 12,488,542 B2
タイトル:Crash Detection On Mobile Device
発明者:Vinay R. Majjigi, Sriram Venkateswaran, Aniket Aranake, Tejal Bhamre, Alexandru Popovici, Parisa Dehleh Hossein Zadeh, Yann Jerome Julien Renard, Yi Wen Liao, Stephen P. Jackson, Rebecca L. Clarkson, Henry Choi, Paul D. Bryan, Mrinal Agarwal, Ethan Goolish, Richard G. Liu, Omar Aziz, Alvaro J. Melendez Hasbun, David Ojeda Avellaneda, Sunny Kai Pang Chow, Pedro O. Varangot, Tianye Sun, Karthik Jayaraman Raghuram, Hung A. Pham, Lauren Schutz
出願人:Apple Inc.
出願日:2023/9/6
公開日:2025/12/2
特許の詳細については US12485842B2 を参照してください。

※企業の特許は、製品になるものも、ならないものも、どちらも出願されます。今回紹介した特許が製品になるかどうか現時点では不明です。ご注意ください。

タイトルとURLをコピーしました