Method Article
ここでは、コンピューター断層撮影に基づいて心臓モデルをゼロから構築し、3次元(3D)印刷と複合現実技術を使用して医学生に解剖学を学ぶためのプロトコルについて説明します。
複合現実技術と3次元(3D)印刷は、医療の分野でますます一般的になっています。COVID-19のパンデミックの間、そして制限が緩和された直後、将来の医師の教育に多くの革新が実施されました。また、解剖学の教育における没入型技術や3Dプリント技術にも関心が寄せられていました。ただし、これらは一般的な実装ではありません。2023年には、心臓の構造に焦点を当てた授業のために、複合現実技術による3Dプリントとホログラムが準備されました。これらは、エンジニアのサポートを受けて、心臓の詳細な構造について学び、人間の死体での学習の従来のモデルをサポートする新しい技術に慣れることができる学生に教えるために使用されました。学生は、この可能性に非常に価値があると感じています。この記事では、クラスの資料を準備するプロセスと、さらなる実装の可能性について説明します。著者らは、提示された技術がさまざまな教育レベルでの学生の教育における開発の機会と、ますます普及する実装の正当化を見出しています。
3次元(3D)印刷技術と複合現実は、医療でますます一般的に使用される技術的成果です。さまざまな分野の多くの専門家の日常の臨床診療だけでなく、研修医や将来の医師、つまり医学生の教育にも応用が見出されています1,2,3,4,5,6。
3D印刷技術は、主に商業団体が提供する解剖学的モデルの印刷によく使用されますが、この種の学習準備に対する学生の関心の高まりは、医科大学の解剖学部門に革新を導入するための衝動です7。調製物は、解剖学的アトラス、図面および彫刻からのデータに基づいて作成することができるが、コンピュータ断層撮影または磁気共鳴画像法1,8,9のような画像研究にも基づいて作成することができる。3Dプリンターで解剖学的準備をさまざまなスケールで印刷することが可能であり、色、マーカー、およびその他のバリエーションを使用して、教材のアクセシビリティを高めることができます10,11。資料の入手可能性が高まっているにもかかわらず、ポーランドの医学生は、まだ完全に実装されていない新しい技術の追加を伴う、人間の死体の準備に基づく現在の古典的な教育モデルを支持する意欲が宣言されているにもかかわらず、このタイプの準備に広くアクセスすることはできません。
Mixed Reality テクノロジは、仮想世界と現実世界の統合です。ゴーグルのおかげで、事前に準備されたホログラムの視覚化を可能にするため、現実世界の周囲のオブジェクトに「重ね合わせる」ことができます12。ホログラムは、拡大、縮小、回転など、空間内で操作できるため、表示される画像がより視覚化され、アクセスしやすく、より便利になります。Mixed Reality は、心臓外科 3,13、整形外科 14,15,16,17、腫瘍学 18 など、外科分野のオペレーターによってますます使用されています。特にCOVID-19のパンデミック後の期間に、基礎医学の分野の教育者は、それらを将来の医師の教育に実装するために、複合現実を含む新しいテクノロジーにますます興味を持っています19,20,21。通常の解剖学を教えるアカデミックな教師も、自分の分野に複合現実を導入する余地を見つけています22,23,24,25,26。ホログラムの作成には、イメージング研究、ほとんどの場合はコンピューター断層撮影が必要であり、エンジニアが専用のソフトウェアを使用してレンダリングおよび処理し、ゴーグルで使用できるホログラフィックバージョンにします。
私たちは、医学の初年度の解剖学の授業の一環として、学生が人間の心臓の解剖学を学ぶための有用な資料を作成することにしました。この目的のために、心臓の血管CTスキャンが使用され、データの事前の完全な匿名化後に心臓病科から利用可能になりました。私たちは2つのチームに分かれてホログラムと3Dプリントを作成し、パイロットレッスンの一環として生徒たちに提供しました。学生は資料のアクセシビリティと正確性を非常に高く評価しましたが、このトピックに関する詳細な研究は後で発表されます-結果は現在評価中です。
ここでは、コンピュータ断層撮影から、教育実習に実装された既製のモデルを提示するまでのモデルを作成するプロセスを示します。
このプロトコルは、シレジア医科大学のヒト研究倫理委員会のガイドラインに従っています。患者の画像データは、完全な匿名化後に使用されました。
1. 3D プリンティング - 3D心臓モデルのセグメンテーションと再構築
2. 複合現実
注:CarnaLife Holo(複合現実ソフトウェアと呼ばれる)を使用して、ハートCT DICOMファイルをホログラフィック表現に処理します。
セグメンテーションと 3D 再構成プロトコルにより、解剖学トレーニングの 2 つの主要な出力 (3D プリントされた心臓モデルと心臓の 3D MR 視覚化) が得られました。これらの結果は、患者固有のCTデータを活用しており、学生が実践的で没入型の学習体験に取り組むための補完的なツールを提供します。
3Dプリントされた心臓モデルにより、学生は心臓の解剖学的構造の具体的な表現と物理的に対話することができます。このモデルは、心筋などの明確な外部特徴と、チャンバーやバルブなどの内部構造を示します。成功した実験では、解剖学的精度が高く、特徴が明確に定義され、後処理後のアーティファクトが最小限に抑えられていました。 図9 は、心筋と内部心室を明確に区別した、完全に処理された3Dプリントモデルを示しています。CT画像のコントラストが最適ではない場合、セグメンテーションエラーにより、チャンバーサイズが不規則になったり、バルブ構造が不完全であったりするなど、モデルの精度が不正確になりました。これらの問題は、 図 10 で強調されているように、多くの場合、追加のスムージングやアーティファクトの除去など、手動による介入で修正できました。
対照的に、3D Mixed Reality ビジュアライゼーションは、学生が仮想空間で心を探索できるダイナミックでインタラクティブな体験を提供します。MR環境は、回転、ズーム、さまざまな解剖面による切片作成などのリアルタイムのインタラクションを提供し、冠状動脈や中隔壁などの複雑な構造をより詳細に理解することができます。MRビジュアライゼーションの実装が成功したことで、外部と内部の両方の解剖学的構造を非常に正確に表現することができました。しかし、最適でない可視化(セグメンテーションに欠陥がある場合など)は、内部構造のビューが歪むことになり、MRモデルのリアリズムと教育効果に影響を及ぼしました(図11)。複雑な解剖学的構造の場合、セグメンテーションアプローチでは不十分な場合があります。ボリュメトリックレンダリングの可能性により、解剖学的構造を理解するために重要なさまざまな密度(ハウンズフィールドユニットで表される)を視覚化することができます(図12)。
この手法は、正確で操作可能なモデルを提供することで学習体験を向上させる堅牢で補完的なツールを提供しますが、その成功はプロトコルの初期ステップでのセグメンテーションと再構築の品質にかかっています。全体として、これらの結果は、患者固有のCTデータから正確な心臓モデルを作成する上でのプロトコルの有効性を示しています。これらの結果は、患者固有のCTデータから正確な心臓モデルを作成する上でのプロトコルの有効性を示しています。
解剖学教育、特に心臓の構造の学習における複合現実技術に対する学生の認識を評価するための予備研究が行われました。この研究には、エンジニアの監督の下でホログラムを学習目的で利用することができた106人の学生が参加しました。セッションの最後には、「Mixed Reality テクノロジは、心臓の構造というトピックをよりよく理解するのに役立ちましたか?」という質問がありました。すべての回答者(100%)が「はい」と回答しました。学生の知識は、セッションの直後に、心臓の形態に関連する3つの解剖学的構造を説明することを要求する短い筆記試験を通じて評価されました。平均スコアは、合計スコア3に対して2.037でした(表1)。
図1:心臓のCTセグメンテーション。 3D SlicerソフトウェアでのCTセグメンテーションの軸方向(左上)、冠状(左下)、矢状面(右下)、および3D(右上)のビュー。 この図の拡大版を表示するには、ここをクリックしてください。
図2:後処理。 プロトタイプ設計ソフトウェア上のセグメンテーション3Dモデルのビュー。 この図の拡大版を表示するには、ここをクリックしてください。
図3:後処理後。 プロトタイプ設計ソフトウェア上のセグメンテーション3Dモデルのビュー。 この図の拡大版を表示するには、ここをクリックしてください。
図 4: Mixed Reality ソフトウェアのビュー。 アプリケーションの起動画面。明確でアクセス可能なログインパネル。 この図の拡大版を表示するには、ここをクリックしてください。
図 5: Mixed Reality ソフトウェアで正しいシリーズを選択する。 ホログラフィック視覚化のための利用可能なコンピューター断層撮影画像の選択。 この図の拡大版を表示するには、ここをクリックしてください。
図 6: Mixed Reality ソフトウェアで視覚化の一部を切り抜くためのはさみオプション。 ユーザーのニーズに合わせてホログラムをリアルタイムで調整できるツール。 この図の拡大版を表示するには、ここをクリックしてください。
図 7: Mixed Reality ソフトウェアでのホログラフィック視覚化の色の調整。 視覚化に色を追加すると、ホログラムのアクセシビリティと明瞭さが向上します。 この図の拡大版を表示するには、ここをクリックしてください。
図 8: Mixed Reality ソフトウェアで作成されたホログラフィック空間での視覚化。 強調表示された色と、空間での向きを助けるためのコンピューター断層撮影マーカーを備えた3次元ホログラム。 この図の拡大版を表示するには、ここをクリックしてください。
図9:後処理とブール演算の「X線」プレビュー後。 プロトタイプ設計ソフトウェアでの3Dモデルのビュー。完全に処理された3Dプリントモデルで、心筋と内部の心室を明確に区別しています。 この図の拡大版を表示するには、ここをクリックしてください。
図10:モデルを4チャンバー投影でカットした後、最終的な3Dプリントされたパーツのプレビュー。 プロトタイプ設計ソフトウェアでの3Dモデルのビュー。追加のスムージングとアーティファクトの除去。 この図の拡大版を表示するには、ここをクリックしてください。
図 11: Mixed Reality ソフトウェアでの CT データの視覚化。 サーフェスレンダリングは、過剰なセグメンテーションの結果を表します。 この図の拡大版を表示するには、ここをクリックしてください。
図12:複合現実ソフトウェアでのCTデータの例示的な視覚化。 ボリュームレンダリング:さまざまな密度を視覚化します。 この図の拡大版を表示するには、ここをクリックしてください。
総生徒数(n) | 106 | ||
学習目的でホログラムを使用した生徒の数 (n) | 106 | ||
「Mixed Reality テクノロジは、トピック (心臓の構造) をよりよく理解するのに役立ちましたか?」という質問に「はい」と答えた学生の数(n) | 106 | ||
「Mixed Reality テクノロジは、トピック (心臓の構造) をよりよく理解するのに役立ちましたか?」という質問に「いいえ」と答えた学生の数(n) | 0 | ||
最低スコア | 0 | ||
最高得点 | 3 | ||
心臓の形態に関連する3つの解剖学的構造を説明するための短い筆記試験を受けた学生の平均スコア | 2.037 | ||
合計スコア | 3 |
表1:研究の予備データ。
現代の解剖学は、主に何百年も前から知られている古典的で実績のある方法に基づいています。人間の死体は、将来の医師を教えるための基礎であり、解剖学者は、人体の構造を理解するだけでなく、倫理的態度を形成する上でもその役割を強調しています28,29。技術の開発は、日常の臨床手順だけでなく、教育においても広範囲に及んでいるため、3Dプリンティング7,30,31,32、および解剖学教育33,34,35,36に複合現実を実装する試みが行われています。現在、医師の仕事は主に最新のソリューション、機器、および広く理解されているデジタル化に基づいており、自動化、ロボット化、革新的なソリューションの実装の割合の増加は、長年にわたって続いている傾向を考慮に入れると進行します。
従来の教育形態を3Dプリント、複合現実(MR)を使用した授業、または超音波で補完することは、より多くの知識を習得し、さまざまなタイプのイメージング技術での視覚化を比較する機会だけでなく、新しいテクノロジーとの接触により、将来の医師の専門職への準備に非常にプラスの影響を与える可能性があります。 それらの使用に精通し、特に関心のある分野で新しいアプリケーションについて考える衝動を与える37。
3D プリント技術でモデルを準備し、複合現実技術でホログラムを作成するには、標準以上の取り組み、作成の計画、およびそれらを使用した授業の自由を得る必要があります。これらは高価なソリューションであり、特に複合現実では、ホログラム(ゴーグル)を表示できるデバイス、エンジニアリング施設(アプリケーションとその操作を含む)が必要であることを付け加えておく必要があります。3D印刷は、その人気が高く、コストが低いため38、実装が簡単ですが、解剖学部門が独自のモデルをゼロから作成したい場合は、プリンターとフィラメントの購入を計画し、DICOMイメージング研究から印刷する準備ができている画像を作成するためのソフトウェアが必要です。
CarnaLife Holoは、CTデータとセグメンテーション結果の両方をアップロードできる、MR領域ではあまり適用されない独自のアプローチを提供します。現在の最先端の技術は、通常、STLまたはOBJファイル39,40に基づく表面レンダリングを使用して3Dモデルを視覚化します。その結果、ユーザーはセグメンテーション結果にのみアクセスでき、元のデータを直接表示できる機能は限られています。これは、セグメンテーションの精度が重要な石灰化などの小さな構造や病状を分析する際に課題となる可能性があります。
生データの可視化(ボリュームレンダリング)により、ジオメトリだけでなく、構造物内のハウンズフィールド単位(密度)の分布を解析することで、構造物を評価することができます。自動心臓セグメンテーションは、手動セグメンテーションの面倒な作業を容易にする一般的な手法であるが、その限界がある41。セグメント化できる構造の数によって制約され、特に病状が存在する場合は、効率的な処理のために高性能なハードウェアが必要です。
これらの課題に対処するために、ボリュームレンダリングとサーフェスレンダリングの2つの視覚化方法の組み合わせが提案されています。このハイブリッドアプローチにより、セグメント化された構造と分析されたデータ内の値の分布を同時に視覚化できるため、ユーザーはデータ解釈のためのより包括的なツールを利用できます。
心臓の解剖学の場合、プログラムの標準的な自動ツールでは、サイズ、形状、解剖学的構造の位置、アーティファクトの存在、隣接する組織間の境界のぼやけた(低コントラスト)などの不均一性により、フルイメージから心臓組織を抽出するには不十分であるため、3Dモデルの作成は複雑になります。したがって、閾値セグメンテーションに加えて、「スライス・バイ・スライス」メカニズムで医師が監督するセグメンテーションを実施する必要があります。次の段階は、モデルを3Dプリンティングに適合させることで、これには、画像取得中のノイズから生じる歪みのさらなる除去が含まれます。印刷後、モデルをアセトンに穏やかに溶解して、表面を滑らかにします。学生による既製のモデルの使用は簡単です-人間の死体の準備を見て議論するのに似ています。複合現実の場合、毎回、テクノロジーの使用(ゴーグルの頭への正しい取り付け、音声とジェスチャーの制御)のトレーニングが必要です。利用可能な設備が限られているため、同時により多くの生徒が参加することはできません。画像化された材料のアクセシビリティを高めるために、特定の解剖学的構造のマーカーを使用して、調製物(ホログラム)の迅速な議論を促進しました。
3D Slicerでのセグメンテーションと3D再構築のプロセスをマスターすることは、複数の機能とワークフローを学ぶ必要があるため、初心者にとっては難しい場合があります。習熟度を高めるには、通常、かなりの練習と経験が必要です。私たちの観察では、ソフトウェアで信頼性を得るには、少なくとも5〜7の異なる心臓モデルのセグメント化を含む、約20〜30時間の専用作業が必要でした。3D Slicer は、強力なオンライン コミュニティの恩恵を受けるオープンソース プラットフォームです。広範なトラブルシューティング リソース、問題解決フォーラム、豊富なチュートリアルとユース ケースを提供します。これらのリソースは、アクセス可能なガイダンスを提供することにより、学習プロセスを促進します。さらに、ChatGPTやGeminiなどの大規模言語モデル(LLM)などのツールを利用することで、ソフトウェアとその機能の理解を深めることができます。学習段階では、医用画像と解剖学の経験を持つメンターまたはスーパーバイザーへのアクセスが非常に有利であることが証明されています。セグメンテーション戦略と精度に関する即時フィードバックにより、スキル開発が加速し、解剖学的精度が維持されます。初心者は、最初の試行に時間がかかり、エラーが発生しやすい可能性があることを予期する必要があります。しかし、一貫した実践により、セグメンテーションとリファインメントのプロセスが大幅に直感的で効率的になります。この学習曲線には忍耐強く取り組むことが不可欠であり、ツールをしっかりと使用することで速度と精度が大幅に向上します。
提示されたプロトコルの重要なステップは、3Dプリントおよび複合現実技術に役立つ3次元モデルを作成するために、イメージング研究からの心臓組織の適切なセグメンテーションと抽出でした。
3Dプリントと複合現実技術を使用した心臓解剖学の授業は、学生から非常に好評を博し、大多数は技術的なサポートが有用であると感じています。著者によると、新しいテクノロジーは、既存の古典的な教訓的なソリューションをサポートし、ますます広く使用する必要があります。
Maciej Stanuch、Marcel Pikuła、Oskar Trybus、Andrzej SkalskiはMedApp S.A.の従業員です。MedApp S.A.は、CarnaLifeHoloソリューションを製造している会社です。
この研究は、非営利協力の一環として実施されました。
Name | Company | Catalog Number | Comments |
3D Slicer | The Slicer Community | https://www.slicer.org | Version 5.6.0 |
CarnaLifeHolo | MedApp S.A. | https://carnalifeholo.com | 3D visualization software |
Meshmixer | Autodesk Inc. | https://www.research.autodesk.com/projects/meshmixer/ | prototype design software |
Ender 3 | Creality | https://www.creality.com/products/ender-3-3d-printer | 3D printer |
Cura | UltiMaker | https://ultimaker.com/software/ultimaker-cura/ | 3D printing software |
このJoVE論文のテキスト又は図を再利用するための許可を申請します
許可を申請This article has been published
Video Coming Soon
Copyright © 2023 MyJoVE Corporation. All rights reserved