Sign In

A subscription to JoVE is required to view this content. Sign in or start your free trial.

In This Article

  • Summary
  • Abstract
  • Introduction
  • Protocol
  • Representative Results
  • Discussion
  • Acknowledgements
  • Materials
  • References
  • Reprints and Permissions

Summary

פיתחנו שיטה פשוטה, ניתנת להתאמה אישית ויעילה לרישום נתונים תהליכיים כמותיים ממשימות מרחביות אינטראקטיביות ולמיפוי נתוני סיבוב אלה עם נתוני מעקב עיניים.

Abstract

אנו מציגים שיטה להקלטה בזמן אמת של אינטראקציה אנושית עם אובייקטים וירטואליים תלת מימדיים (3D). הגישה מורכבת משיוך נתוני סיבוב של האובייקט המניפולטיבי עם מדדים התנהגותיים, כגון מעקב עיניים, כדי להסיק מסקנות טובות יותר על התהליכים הקוגניטיביים הבסיסיים.

המשימה מורכבת מהצגת שני מודלים זהים של אותו אובייקט תלת-ממדי (מולקולה), המוצגים על מסך מחשב: אובייקט מסתובב ואינטראקטיבי (iObj) ואובייקט מטרה סטטי (tObj). המשתתפים חייבים לסובב iObj באמצעות העכבר עד שהם מחשיבים את הכיוון שלו זהה לזה של tObj. המחשב עוקב אחר כל נתוני האינטראקציה בזמן אמת. נתוני המבט של המשתתף נרשמים גם באמצעות מעקב עיניים. תדר המדידה הוא 10 הרץ במחשב ו- 60 הרץ במעקב העיניים.

נתוני ההתמצאות של iObj ביחס ל- tObj נרשמים בקווטרניונים סיבוביים. נתוני המבט מסונכרנים לכיוון של iObj ומופנים באמצעות אותה מערכת. שיטה זו מאפשרת לנו לקבל את ההדמיות הבאות של תהליך האינטראקציה האנושית עם iObj ו- tObj: (1) פער זוויתי המסונכרן עם נתונים אחרים תלויי זמן; (2) מסלול סיבוב תלת-ממדי בתוך מה שהחלטנו לכנות "כדור סיבובים"; (3) מפת חום של קיבוע תלת-ממדי. כל שלבי הפרוטוקול השתמשו בתוכנה חופשית, כגון גנו אוקטבה ו-Jmol, וכל הסקריפטים זמינים כחומר משלים.

בעזרת גישה זו, אנו יכולים לערוך מחקרים כמותיים מפורטים של תהליך פתרון המשימות הכולל רוטציות מנטליות או פיזיות, ולא רק את התוצאה שהושגה. ניתן למדוד בדיוק עד כמה כל חלק במודלים התלת-ממדיים חשוב למשתתף בפתרון משימות, ובכך לקשר את המודלים למשתנים רלוונטיים כגון מאפייני האובייקטים, יכולות קוגניטיביות של הפרט ומאפייני ממשק אדם-מכונה.

Introduction

סיבוב מנטלי (MR) הוא יכולת קוגנטיבית המאפשרת לאנשים לבצע מניפולציות מנטליות ולסובב אובייקטים, מה שמקל על הבנה טובה יותר של התכונות והיחסים המרחביים שלהם. זוהי אחת היכולות החזותיות-מרחביות, קבוצה קוגניטיבית בסיסית שנחקרה כבר בשנת 18901. יכולות חזותיות-מרחביות הן מרכיב חשוב ברפרטואר הקוגניטיבי של הפרט המושפע הן מגורמים תורשתיים והן מגורמים סביבתיים 2,3,4,5. העניין ביכולות חזותיות-מרחביות גדל במהלך המאה העשרים בשל עדויות מצטברות לחשיבותן במקצועות מפתח כגון הזדקנות6

Protocol

1. הכנת כלים לאיסוף נתונים

  1. הגדר את איסוף הנתונים המקוון (אופציונלי).
    הערה: שלב זה מתאר כיצד להגדיר שכפול הניתן להתאמה אישית של קוד הפרויקט ודף האינטרנט הפועל (עיין במאמר קובץ משלים 1). שלב זה הותאם מהערכות הלימוד הזמינות ב- https://pages.github.com/ וב- https://github........

Representative Results

אבולוציה של פער זוויתי ומשתנים אחרים
כפי שמתואר בשלב 3.3.1 בקובץ משלים 2, שני קנבסים מוצגים למשתתף על מסך צג הווידאו, ומציגים עותקים של אותו אובייקט וירטואלי תלת-ממדי בכיוונים שונים. בבד הציור השמאלי, אובייקט היעד (tObj) נשאר סטטי ומשמש כמיקום היע?.......

Discussion

כאמור, מאמר זה נועד להציג הליך מפורט של מיפוי בזמן אמת של נתוני קיבוע ותנועת סקאדה על אובייקטים תלת-ממדיים אינטראקטיביים, הניתן להתאמה אישית בקלות ומשתמש רק בתוכנה הזמינה בחינם, ומספק הוראות שלב אחר שלב כדי לגרום לכל דבר לעבוד.

בעוד שמערך ניסיוני זה כלל מש?.......

Acknowledgements

המחברים מודים לתיאום לשיפור כוח האדם להשכלה גבוהה (CAPES) - קוד האוצר 001 ולאוניברסיטה הפדרלית של ABC (UFABC). ז'ואאו ר. סאטו קיבל תמיכה כספית מקרן המחקר של סאו פאולו (FAPESP, מענקים מס '2018/21934-5, 2018/04654-9 ו- 2023/02538-0).

....

Materials

NameCompanyCatalog NumberComments
FirefoxMozilla Foundation (Open Source)Any updated modern browser that is compatible with WebGL (https://caniuse.com/webgl), and in turn with Jmol, can be used
GNU OctaveOpen Sourcehttps://octave.org/
Google Apps ScriptGoogle LLCscript.google.com
Google SheetsGoogle LLChttps://www.google.com/sheets/about/
LaptopAny computer that can run the eye tracking system software.
Mangold Software SuiteMangold Software interface used for the Eye tracking device. Any Software that outputs the data with system time values can be used.
MouseAny mouse capable of clicking and dragging with simple movements should be compatible. Human interfaces analogous to a mouse with the same capabilities, such as a touchscreen or pointer, should be compatible, but may behave differently.
Vt3miniEyeTech Digital Systems60 Hz. Any working Eye Tracking device should be compatible.

References

  1. Spearman, C. 34;General intelligence," objectively determined and measured. The American Journal of Psychology. 15, 201-292 (1904).
  2. McGee, M. G. Human spatial abilities: p....

Explore More Articles

JoVE212JmolJSmol

This article has been published

Video Coming Soon

JoVE Logo

Privacy

Terms of Use

Policies

Research

Education

ABOUT JoVE

Copyright © 2025 MyJoVE Corporation. All rights reserved