Method Article
この論文では、マルチセンサーウェアラブルとその完全に自動化されたディープラーニングベースの分析パイプラインを使用した乳児の粗大運動能力の評価について概説します。この手法は、仰臥位から自立歩行を習得するまでの乳児の姿勢と運動パターンを定量化します。
早期粗大運動評価の客観的かつ定量的な方法の開発は、神経発達をよりよく理解し、早期の治療介入を支援するために不可欠です。本稿では、全自動クラウド型パイプラインを用いて、自動化・拡張性・定量的・客観的な評価を行うマルチセンサーウェアラブル端末「MAIJU (Motility Assessment of Infants with a JUmpsuit)」を用いて、粗大運動能力を定量化する手法を紹介します。このウェアラブルスーツには、低エネルギーのBluetooth接続を利用して携帯電話に同期データを記録する4つの動きセンサーが装備されています。クラウドサーバーでのオフライン分析では、各記録について数分以内に完全に分析された結果が生成されます。これらの結果には、記録セッションのグラフィカルなレポートと、姿勢、動き、乳児の抱っこ、および自由遊び時間を秒単位で分類する詳細な結果マトリックスが含まれます。私たちの最近の結果は、乳児の粗大運動発達の変動を区別するための潜在的に効果的な方法を提供する、そのような定量化された運動評価の利点を示しています。
早期の粗大運動発達は、乳児の環境探索をサポートすることで後に現れる高レベルの神経認知能力に不可欠です。したがって、臨床医も研究者も同様に、初期の粗大運動発達を評価することに高い関心を持っています1,2,3。エビデンスに基づく医学や科学的研究をサポートするためには、粗大運動評価が定量的で信頼性が高く、客観的で、生態学的に妥当であることが不可欠です。しかし、臨床研究にも基礎科学研究にも利用できるそのような方法は不足しています。
典型的な初期の粗大運動発達は、新たに習得されたスキルの予測可能なシーケンスを通じて進行します。乳児では、離散的な運動のマイルストーン4に到達することが一般的に観察され、立位や歩行は、より複雑な行動のレパートリー5に向かう途中の重要なランドマークと見なされることがよくあります。運動のマイルストーンに関する直接観察または親の調査に加えて、実験室または病院環境で乳児の評価を実行するために、広く使用されているいくつかの標準化されたバッテリーが開発されています6,7,8,9。しかし、これらの評価には、訓練を受けた専門家による実質的な専門知識が必要であること、部分的に主観的でカテゴリー的であること、乳児の視点から見て不自然な環境(病院または実験室)での乳児のパフォーマンスを評価することなど、複数の注意点があります。
乳児の自発的な運動活動を家庭などの自然環境でより長い時間にわたって記録することで、より適切な運動能力の測定が可能になります。そのような実行可能な方法の1つでは、MAIJUウェアラブル(JUmpsuit装着した乳児の運動評価)10,11,12などのウェアラブルシステムを使用して、仰臥位から流暢に歩くまでの乳児の運動能力発達の全シーケンスについて評価が行われます。MAIJUウェアラブルシステム(図1)は、全身に動きセンサーを搭載したテキスタイルウェアで、病院外や検査室での評価と記録を監視なしで行い、自動パイプラインで分析することで、姿勢や動きのパターンを秒単位で評価します。これらのアルゴリズムによる検出は、姿勢や動作の種類ごとに個別に使用することも、乳児の運動能力の成熟度を総合的に評価するために組み合わせることもできます。最近発表された、このような運動成熟度の指標の単位のない表現は、BIMS(Baba Infant Motor Score)10,12です。
この記事では、マルチセンサーウェアラブルスーツを使用した乳児の粗大運動能力の評価について説明します。マルチセンサーウェアラブル10、11、12による記録に利用可能な自動分析パイプラインから取得できるメトリックを使用するための理論的根拠、実用的なパフォーマンス、分析パイプライン、および潜在的な将来の展望。この方法は、仰臥位と流暢な歩行の間の運動能力を示すすべての乳児の自発的な粗大運動活動の詳細な定量に適しています。
マルチセンサーウェアラブルシステムは、1)4つの動きセンサーを搭載した全身の衣服、2)カスタムビルドのiOSアプリケーションを使用するモバイルデバイス、3)クラウドベースの分析パイプライン(Babacloud、その資格情報は著者から入手できる)の3つのコンポーネントで構成されています11。防水慣性測定ユニット(IMU)センサーは、低エネルギーBluetooth接続を使用して、13〜52Hzのサンプリング周波数で同期データ(3軸加速度計とジャイロスコープ)を携帯電話にストリーミングします。データは最初に(センサーまたは)モバイルデバイスのメモリに保存され、記録が停止された後、クラウドサーバーでオフライン分析が行われます。
このシステムで実施された研究は、ヘルシンキ大学病院の新小児病院の倫理委員会によって審査され、病院は、この研究で引用された元の研究に記載されている研究プロジェクトを実施する許可を与えました。インフォームドコンセントは、ビデオの中の子供を撮影するために得られました。
1. レコーディングセッションのためのスーツの準備
2.録音セッションのための乳児の準備と着替え
3. レコーディングセッション
4. クラウド型解析:生データのアップロードと結果のダウンロード
提示された方法は、記録セッションの毎秒の姿勢と動きの種類を分類することにより、乳児の粗大運動能力を定量化します。したがって、自動分析パイプラインの結果パッケージには、記録セッション全体からの完全な分類マトリックス (補足ファイル 3) とグラフィカルな要約 (補足ファイル 4) が含まれています。正確な研究の質問に応じて、これらの結果はさまざまなレベルで検査できます。
結果検査は、このメソッドの開発と検証に使用されました。
以下では、この方法論の開発と検証に使用される4つのレベルの結果検査を紹介します。 補足ファイル5 は、以前に詳細に発表された主要な検証実験の代表的な例を示しています10、11、12。
まず、動きと姿勢の検出用にトレーニングされた自動アルゴリズムを、乳児の運動行動に関する秒単位の人間の観察に対して検証しました。並行して訓練を受けた専門家を何人か使用し、ウェアラブル録画と同期したビデオ録画を盲目的にレビューしました。すべての異なる姿勢と動きのカテゴリを個々の人間のアノテーションとは別に比較したところ、姿勢についてアルゴリズムと人間の間で非常に高い一致が見られました(平均κ0.93)。移動カテゴリ(サブカテゴリ固有のカッパ、主に60〜80%の範囲)については、かなりの一致が見られました。混同行列10 の例については、補足ファイル 5A を参照してください。また、評価者間の一致レベルを評価して、アルゴリズムが人間と同等のレベル10,11で動作することを確認しました。
次に、分類器ベースの動きと姿勢のカテゴリの定量化が、第2レベルの人間の注釈からの対応する定量化とどの程度一致するかを評価しました。補足ファイル5B10に示されている散布図の例は、いくつかの主要なカテゴリーが、アルゴリズムと人間の視覚定量との間でほぼ完全に一致している(相関係数>0.96)であることを示している。このことは、運動量定量の年齢別分布(図3A、B)が信頼できるという考えを直接裏付けています12。
第三に、運動成熟度の全体的な評価のアイデアは、典型的に発達している乳児の実際の年齢と非常に密接に相関する組み合わせ運動量(上記参照)から発達年齢予測を訓練することによって検証されました(r = 0.89; 補足ファイル5C)。その後、年齢予測を単位のない尺度BIMS(Baba Infant Motor Score10)として0-100にスケーリングし、運動成長チャート(補足ファイル5D)を作成するためのその有用性を、年齢依存的で予測可能な成長軌道を高度に示す典型的な発達中の乳児コホートを使用して検証しました。また、運動成長チャートの精度がよく知られている物理的成長チャート12と比較しても優れていることを示すことで、その相対的な精度を検証しました。
第4に、与えられた指標による異常検出の可能性は、個々の運動測定値が運動能力の低い乳児と良好な乳児をそれぞれ明確に区別することが示された原理実証実験で検証されました(補足ファイル5E)10。
さまざまなレベルの分析における潜在的なさらなる研究の質問
図3 は、ウェアラブルスーツとその自動分析パイプラインによって提供される情報のさらなる使用例を示しています。まず、姿勢と運動能力の早期発達を年齢の関数としてプロットし、年齢依存の分布と比較する(図3A、「成長チャート」12)、または各個人の発達を経時的に追跡することができます(図3B)。第二に、研究課題がより包括的な粗大運動評価を必要とする場合、個人の姿勢と運動の比率の組み合わせ(補足 ファイル5Dに示すように、 補足ファイル5Cの時系列から計算)を使用して、BIMS(Baba Infant Motor Score)のような指標を生成できます。このような測定は、運動成長チャート(補足ファイル5C、D)やzスコア(図3A)などの統計的導出の計算での直接使用をサポートします。アルゴリズムの検出をフルタイムで行うことで(図3C、 補足ファイル3)、乳児の運動性の詳細な時間構造を調べることができ、「乳児は単位時間に何回の姿勢転換を行うか」や「自発的な遊びの時間における立位エポックの分布は何か」といった疑問を抱くことができます。
図1:マルチセンサーウェアラブルシステムの概要と、記録から分析までの一般的な検討フロー。 図1 は、CC_BYライセンスに基づいて公開されたAiraksinen et al.12から引用したものです。乳児の写真は、保護者の同意を得て公開されています。 この図の拡大版をご覧になるには、ここをクリックしてください。
図2:姿勢と動きの分類と、生データと分析出力の視覚化例 (A)マルチセンサーウェアラブルの完全自動分析パイプライン内でアルゴリズム分類器によって使用される姿勢と動きの分類スキーム。この図は、Airaksinen et al.10 (B) Example of a 10 分間の生の加速度計センサー データを MAIJU の記録から出力した 4 つのアームのそれぞれから転載したものです。下の横棒は、同じ 10 分間のエポックの姿勢 (上のバー) と動き (下のバー) の検出の自動分類器出力を示しています。 この図の拡大版をご覧になるには、ここをクリックしてください。
図3:生の分類器の出力から得られた結果の例。 (A)乳児の年齢とBaba Infant Motor Score(BIMS)のデータ比較の例。S字型の緑色の曲線は、より大きな集団におけるBIMSの開発軌跡を示しています。ドットは、BIMS ~74 で 14 か月で測定された個体の例を示しており、平均年齢の典型的なレベルを少し下回っています (緑色の線)。(B)Baba Infant Motor Score(BIMS)を使用した運動発達の個々の軌跡を持つコホートの例。各線は、いくつかの年齢ポイントで記録された乳児を表します(線内の点)。線は、年齢の典型的な平均に対する平均逸脱度に対して色付けされています(背景の青いS字型の曲線、パネルAも参照)。 (C) Babacloudパイプラインからの自動分類器からの代表的な出力行列。最初の列は、分類の各解析ウィンドウの記録開始からの経過時間 (秒単位) を示します (ウィンドウ期間 2.3 秒、50% オーバーラップ)。2 番目と 3 番目の列は、姿勢と動きの分類器検出をそれぞれ示しています。3列目と4列目は、乳児が誰かに抱かれたときと、乳児が自律遊びをしていたときをそれぞれ描く補助分類器です。(D)要約報告書の図。パネルAとBは、Airaksinen et al.10から引用したものである。 この図の拡大版をご覧になるには、ここをクリックしてください。
補足ファイル1:MAIJUウェアラブルで録音するためのクイックガイド。このファイルをダウンロードするには、ここをクリックしてください。
補足ファイル2:MaijuloggerからBabacloudの分析サーバーにデータを転送するためのクイックガイド。このファイルをダウンロードするには、ここをクリックしてください。
補足ファイル3:姿勢、動き、乳児の抱っこ、自由遊び時間について、秒単位で分類した詳細な分類マトリックスの例。このファイルをダウンロードするには、ここをクリックしてください。
補足ファイル 4: グラフィカルな要約レポートの完全な PDF ファイルの例。 これは、(A)記録セッションに関する基本的な背景情報(被験者IDと年齢、記録日、期間、および最終分析に使用されたエポックの合計量)を含むアルゴリズムファイルから取得されます。(B)定量的評価から除外される全記録およびエポックにおける姿勢の分布を示す全記録のグラフィック表示。C)6つの姿勢すべて(左側)と12の動きタイプ(右側)のバイオリンプロットで表示される典型的な分布。同様に、右側の図面は、各姿勢が示す動きの種類を示しており、運動能力が徐々に発達するシーケンスも示しています(個々の録音の結果を示すドットと、関連するデータセットの姿勢/動きの年齢依存的な分布を示すカラフルなバイオリンプロット)。特に、ドットで示される生の値は、特定のモーター性能の実際の量を示しており、他のコンテキストで直接使用できます。 このファイルをダウンロードするには、ここをクリックしてください。
補足ファイル5:さまざまなレベルの分析での検証実験。 (A) 姿勢と動作の両方のカテゴリについて、人間の注釈 (ターゲット クラス) とアルゴリズムの検出 (予測クラス) の間の一致を示す混同行列。(B)人間のアノテーションと自動分類器から得られた検出との間の完全な記録セッションにわたる運動定量の比較。(C)ウェアラブルデータからの発達年齢予測(左側のY軸)と、BIMSスコアを生成するための再スケーリング(右側のY軸)との相関関係。記録時の乳児の実年齢がX軸に表示されます。(D)近似関数を用いた場合の年齢予測と実年齢の相関。値は、描かれた時間枠でグループ平均を使用する場合(青)、すべての生の値(黒)、または各個人の反復測定(緑)を考慮する場合のモデルへの適合を示します。(E)成績の良い乳児と成績の悪い乳児のグループ間の個々の運動測定値の比較は、自動的に検出されたいくつかの運動指標がこれらの乳児グループを区別する可能性があることを示唆しています。パネルA、B、CはAiraksinen et al.10から引用した。パネルDはAiraksinenら12から引用したものである。パネルEは、"Airaksinen et al.11. このファイルをダウンロードするには、ここをクリックしてください。
MAIJUのようなウェアラブルソリューションによる乳児の運動能力の定量的な評価と発達追跡は、技術的に習得と実行が簡単で、ヘルスケアや臨床研究の実践に容易に実装できます10,11,12。他の既存の運動評価方法と比較して、乳児の自発的な運動活動のこの種の家庭での記録は、評価の生態学的妥当性を向上させます。さらに、乳児の運動能力を定量化し、透明性を高め、完全に自動化した分析を提供します。最も重要なことは、分析で使用される指標が直感的で説明可能であるため、環境要因、認知発達、心理社会的評価など、他の臨床および研究評価と簡単に比較できることです。運動発達の全体的な評価は、従来の身体的成長測定12によく匹敵する精度を提供します。
プロトコルの重要なステップには、ウェアラブルスーツの慎重な準備が含まれます。袖や脚のセンサーアタッチメントは、体の動きを確実に記録するためにしっかりと固定する必要があるため、撮影の準備をする際は、スーツに適したサイズを選択することが重要です。また、記録を成功させるには、プロトコルに示されているように、センサーを正しい向きでポケットに配置することが不可欠です。センサーマウントは、記録中にセンサーを回転させることはできません。しかし、センサーの向きが間違っていると、後で修正することは不可能ではないにしても困難なデータを記録します。記録中、乳児は自由かつ独立して動くように促されるべきです。録音の長さは、特定の学習質問によって異なる場合があります。複数の自発的な動きのエポックが組み合わされ、各録音セッションに十分な自発的な動きが蓄積されます。
MAIJUウェアラブルソリューションの柔軟で実用的な操作により、研究室や家庭など、監視付き環境と監視なし環境の両方でさまざまな状況で使用できます。私たちの臨床試験の最近の結果は、自宅で実施された完全に教師なしの録音が、完全または部分的な監督下で行われた録音と同等の結果をもたらす可能性があることを示しています12。それでも、子どもの自発的な運動行動は、周囲の環境(例えば、外で遊ぶか屋内で遊ぶか、空間、家具、おもちゃのレイアウトなど)、子どもの警戒度、家庭での録音中の親の関与など、いくつかの要因によって影響を受ける可能性があります。録音が自宅の監視されていない設定で行われる場合、子供が自発的に遊ぶこと、つまり、必要でない場合は他の誰かが子供を運んだり抱いたりすることなく、独立して遊んだり動いたりすることを奨励し、録音された携帯電話をBluetooth範囲(同じ部屋)に保つことが重要です10。録音中の現在のトラブルシューティング状況の大部分は、Bluetooth接続の喪失が原因です。近い将来、センサー技術の進歩によりBluetooth接続が向上し、より大きなセンサーメモリの導入により、動きデータをセンサーメモリに直接保存することでオフライン記録が可能になります。
この種のウェアラブルソリューションによる院外録画は容易に拡張可能であり、パンデミックなどの状況下での遠隔監視を可能にするなど、乳幼児の安全性を向上させる可能性があります。現在の分類器アルゴリズムは、運動性記述スキーム(図2A)に示されている特定の運動能力、姿勢、および動きを具体的に認識するようにトレーニングされました。これらの現象は、生後2年間の乳児の運動に特徴的なものとして確認された。走ったり跳んだりするなど、年長の子供に見られる他の種類の動きや姿勢は、動きの記述スキームを修正し、それぞれのアルゴリズムをトレーニングして識別する必要があります。姿勢状況依存分析は、乳児の運動活動を異なる姿勢で個別に分析し、研究を支援する、潜在的に実りあるアプローチです(例:乳児の行動の発達相関5,6,7,8,9,13)。あるいは、文脈依存的な運動分析は、片側性脳性麻痺の発症を予測する際の運動機能の非対称性の評価もサポートできる可能性があります10,12,14,15。さらに、MAIJUシステムによる運動能力の評価は、アイトラッキング、イメージング、ビデオ録画などの他の研究モダリティと組み合わせて、さまざまなタイプやコンテキストにまたがるマルチモーダルデータを提供することができます。マルチモーダルデータは、例えば、社会的相互作用の効果や治療的介入の有効性を評価する際に有用であり得る。
乳幼児の院外モニタリング環境で新しいウェアラブル技術を成功させるには、特定の制限、課題、および倫理的懸念に対処する必要があります。私たちの分析パイプラインは、フィンランドの定型的に発育している乳児10、11、12を使用してトレーニングおよび検証されました。純粋な姿勢や動きによる生の分析出力は、普遍的であるべきです。しかし、その発達の軌跡は、多様な文化や地理的な場所に合わせて調整する必要があるかもしれません。ウェアラブルデバイスに関する保護者のフィードバックによると、乳幼児への配慮から好意的に見られています16。ただし、親は、プライバシー、データアクセス、および家族の実用性(複数の介護者、訪問者、さまざまなスケジュールなど)に関する懸念を提起する可能性があります。センサーと録音電話のバッテリー寿命への依存は、方法の制限と見なすことができます。私たちの経験では、バッテリーモデル(CR2025)は、連続データストリーミングを使用する場合、通常、丸一日(12〜24時間)持続します。特に、バッテリーのブランドと、記録環境でのデータ伝送を最大化するために絶えず変化するワイヤレスデータ伝送に必要なBluetooth接続の強度の両方に依存します。たとえば、乳児と電話の間の距離が長い場合や、それらの間の壁があると、Bluetooth接続が調整され、バッテリー消費量が大幅に増加します。特に、ほとんどのモバイルデバイスのバッテリーも、継続的なBluetoothストリーミングを使用している場合、ほぼ同じ時間内に消耗します。実際には、現在使用されているBluetooth接続を介した連続データストリーミングは、センサーとモバイルデバイスの両方が毎日の充電/バッテリー交換が必要であることを意味します。近い将来、大容量のメモリを搭載したセンサーの導入により、センサーメモリにデータを保存できるようになり、1週間以上の連続記録が可能になります。これにより、電力を消費するBluetoothストリーミングの必要性がなくなり、録音状況で制限されていると認識され、人為的エラーの影響を受けやすいBluetooth範囲内で電話を運ぶ必要がなくなります。
全体として、初期の神経発達の追跡には、自然な神経行動の変動に敏感な方法が必要です。粗大運動の発達は、個人レベルと文化レベルの両方で、順序とタイミングの変化からなる複雑なプロセスです4。非定型運動発達の検出は、広範囲の神経発達障害のリスクがある乳児を認識するのに効果的です。標準化された神経発達評価を伴う従来のテストバッテリーは、病院などの管理された環境で実施され、少なくとも部分的に主観的です7,8,9。センサー技術と信号解析の現在の進歩により、病院外での乳児の自発的な運動能力を長期間にわたって記録し、人間の観察者に匹敵する精度で運動行動を定量化できるようになりました10,11,12。新しいウェアラブル技術は、生態学的に有効かつ客観的な方法で乳児の動きと治療的介入の有効性を監視するための自動化されたスケーラブルな方法を提供します。さらに、新しい神経発達指標であるBaba Infant Motor Score(BIMS)は、神経発達の個別追跡により、乳児の運動能力の成熟度を推定することを可能にします10,12。これは、乳児の運動成長チャート12の開発など、将来のさまざまな用途に採用することができます。ウェアラブル動作センサは、異なる種類の動作記述スキームとアルゴリズムを使用して、他の特定の運動性(たとえば、年長の子供または大人用)について自動分類器をトレーニングすることにより、個人の発達段階に関係なく、運動障害や治療的介入の効果のフォローアップなどの臨床応用の可能性を秘めています17.しかし、現時点では、これは治験の方法論と見なされるべきであり、臨床診断や治療目標に情報を提供するために使用すべきではありません。
E.I.は、テキスタイルエンジニアリングのコンサルティングを行うPlanno Oy社の創設者です。他の著者は、開示に関連する利害関係を持っていません。
この研究は、フィンランドアカデミー(314602、335788、335872、332017、343498)、フィンランド小児財団(Lastentautien tutkimussäätiö)、Aivosäätiö、Sigrid Juselius Foundation、およびHUS小児病院/HUS診断センターの研究資金の支援を受けました。
Name | Company | Catalog Number | Comments |
iOS device (version 16.5 or higher) | Apple | n/a | |
MAIJU jumpsuit | Planno Ltd | n/a | customized for purpose |
Maijulogger (mobile application) and sensor firmware | BABA Center (www.babacenter.fi), Kaasa solutions GmbH | n/a | constructed by Kaasa Solutions, distributed by Baba Center |
Movesense movement sensor | Movesense (www.movesense.com) | n/a |
このJoVE論文のテキスト又は図を再利用するための許可を申請します
許可を申請This article has been published
Video Coming Soon
Copyright © 2023 MyJoVE Corporation. All rights reserved