الفكرة باختصار
- قد ينتج الذكاء الاصطناعي إجابة صحيحة، من دون أن يصبح القارئ قادرًا على شرحها أو استخدامها. إنتاج الإجابة وبناء الفهم إنجازان متصلان، لكنهما مختلفان.
- تؤثر طريقة العرض في الفهم. فإذا بقيت العلاقات بين الأفكار خفيّة، كان على القارئ أن يعثر عليها بنفسه؛ وقد تُظهرها طريقة عرض مدروسة.
- قد يبدو الشرح واضحًا أثناء قراءته، ثم تصعب إعادة فكرته أو تطبيقها. الشعور بالفهم ليس اختبارًا كاملًا له.
- قد تحسّن مساعدة الذكاء الاصطناعي الأداء في مهمة، من دون أن تحسّن بالضرورة ما يستطيع الشخص فعله وحده. ويتوقف أثرها في التعلّم على نوع المساعدة وسياقها.
- الإجابة المصمّمة للفهم تُظهر فكرتها المركزية، وتصل بين أجزائها، وتتيح للقارئ الرجوع إلى الدليل. ويُختبر نجاحها بما يستطيع فهمه وفعله.
يبقى ادعاء واحد فرضية: قد تتسع الفجوة بين ما تستطيع النماذج الإجابة عنه وما يستطيع الناس استيعابه كلما تحسّنت. تدعم الأدلة المعروضة التمييز بين صحة الإجابة وفهمها، لكنها لا تثبت أن هذه الفجوة تتسع.
١اللغز
الإجابة الصحيحة مجرد بداية
أن تكون الإجابة صحيحة شيء، وأن تصبح مفهومة لمن يقرؤها شيء آخر. ومن المسافة بين الأمرين يبدأ هذا المقال.
اسأل الذكاء الاصطناعي سؤالًا صعبًا، وقد يقدّم لك في ثوانٍ إجابة تبدو مكتملة. الجمل سليمة، والمعلومات قد تكون صحيحة، ومع ذلك تصل إلى الفقرة الأخيرة وأنت تتساءل عن الصلة بين أجزائها.
ما يشغلني هو العمل الذي يبقى على القارئ: أن يميّز الفكرة الأهم، ويجد الصلة بين نقطة وأخرى، ويعرف ما الذي تعنيه الإجابة للسؤال الذي جاء به. يستطيع النموذج أن ينتج الشرح في لحظة؛ أمّا فهمه فيحدث في مكان آخر، في عقل له معرفة سابقة وانتباه ووتيرة تخصّه.
لنأخذ سؤالًا عن فحص طبي. النتيجة الإيجابية تعني أن الفحص رصد علامة محتملة على حالة معيّنة، لكنها لا تثبت وحدها وجودها. يستعمل المثال التالي أرقامًا افتراضية لتوضيح طريقة التفكير، ولا يصف فحصًا حقيقيًا. جرّب تقدير الإجابة قبل أن تكشفها.
سؤال في تفسير النتيجة
معنى النتيجة الإيجابية
تخيّل فحصًا لحالة غير شائعة. الأرقام التالية افتراضية، ولا تصف فحصًا حقيقيًا.
- توجد الحالة لدى شخص واحد من كل ١٠٠.
- تكون نتيجة الفحص إيجابية لدى ٩٠٪ ممن لديهم الحالة.
- وتكون إيجابية أيضًا لدى ١٠٪ ممن ليست لديهم.
إذا ظهرت نتيجة إيجابية لشخص، فما احتمال أن تكون لديه الحالة؟
إجابة صحيحةبالأسلوب الذي قد يكتب به مساعد محادثة
نطبّق مبرهنة بايز. لنرمز بـم إلى وجود الحالة، وبـت إلى ظهور نتيجة إيجابية.
وفق هذه الافتراضات، توجد الحالة لدى نحو ٨٫٣٪ ممن تظهر لهم نتيجة إيجابية.
وفق هذه الافتراضات، تبلغ الإجابة نحو ٨٫٣٪. قد تبدو أقل مما نتوقّع. في دراسة أُجريت عام ١٩٩٥، قدّم غيرد غيرينتسر وأولريش هوفراجه مسائل من هذا النوع إلى طلاب جامعيين. وعندما صيغت المعلومات على شكل احتمالات، اتّبعت إجابة واحدة تقريبًا من كل ستّ إجابات الاستدلال الصحيح.[١]
الحساب المعروض في الشكل صحيح، لكن صحة الحساب لا تعني بعدُ أن معناه أصبح في متناول كل قارئ. فقد يكرّر أحدنا النتيجة من دون أن يعرف لماذا هي منخفضة، أو ما الذي سيتغيّر لو كانت الحالة أكثر شيوعًا. سنعود إلى المعلومات نفسها بطريقة تكشف مصدر الإجابة.
وليست المسألة حكرًا على الأرقام. قد تسأل أحدهم عن الطريق فيسرد عليك المنعطفات كلها دفعة واحدة. ربما كانت تعليماته دقيقة، لكن تذكّر ترتيبها والتعرّف على التقاطعات أثناء السير مهمة أخرى.
حتى نشرة الطقس المألوفة قد تترك مجالًا لفهم العبارة بأكثر من معنى. قبل أن تتابع، تأمّل التوقّع في الشكل التالي.
جرّب بنفسك: نشرة جوية
نشرة واحدة، وثلاث قراءات
غدًا: احتمال المطر ٣٠٪
ماذا تعني هذه النشرة؟
استُطلعت آراء المارّة في الشوارع في خريف ٢٠٠٢، وشمل الاستطلاع ما بين ١٠٣ و٢١٩ شخصًا في كل مدينة. والنسب مقروءة من الرسوم البيانية في الدراسة، ودقّتها في حدود نقطة مئوية واحدة تقريبًا.
صحيح. هذا هو المعنى الذي يقصده خبراء الأرصاد: يهطل المطر في ٣ من كل ١٠ أيام تشبه الغد.
في استطلاع شمل ٧٥٠ شخصًا في خمس مدن، سُئل المشاركون عمّا تعنيه عبارة «احتمال المطر غدًا ٣٠٪». المعنى المقصود هو أن المطر سيهطل في الموقع خلال نحو ثلاثة من كل عشرة أيام يصدر لها توقّع كهذا. اختار هذا المعنى نحو ثلثي المشاركين في نيويورك؛ أمّا في المدن الأوروبية الأربع فتراوحت النسبة بين الخُمس وما يزيد قليلًا على الثلث. وفهم كثيرون العبارة على أنها تعني هطول المطر خلال ٣٠٪ من ساعات اليوم.[٢]
يختلف توقّع المطر عن تفسير نتيجة الفحص، لكن المثالين يلتقيان عند فكرة واحدة: إنتاج المعلومة ليس الخطوة الأخيرة في التواصل. لا بدّ أيضًا أن يجد من يتلقّاها طريقًا إلى معناها.
قد تصحّ الإجابة، وتبقى مهمة جمع معناها موكولة إلى القارئ.
٢الكشف
الحقائق نفسها قد تكون غامضة أو بديهية
لا نحتاج إلى تغيير معلومات مثال الفحص حتى يظهر معناها بصورة أوضح. يمكن أن نبدأ بتغيير طريقة عرضها.
لنعد إلى مثال الفحص الافتراضي، ونضع المعادلة جانبًا لحظة. تخيّل ألف شخص يخضعون للفحص. يقسّمهم الشكل إلى مجموعات، ويتيح لك تتبّع النتيجة خطوة خطوة. وفي الحالة الأولى المعروضة، نفترض أن الحالة موجودة لدى ١٪ منهم.
المعلومات نفسها، في صورة أخرى
ألف شخص، مجموعة بعد أخرى
الخطوة ١ من ٥
نبدأ بألف شخص
يمثّل كل مربّع شخصًا واحدًا.
- نبدأ بألف شخص. يمثّل كل مربّع شخصًا واحدًا.
- لدى بعضهم الحالة. عندما تبلغ نسبة شيوع الحالة ١٪، يكون عددهم ١٠ من أصل ألف.
- تظهر نتيجة إيجابية لمعظم الحالات. تكون النتيجة إيجابية لدى ٩٠٪ ممن لديهم الحالة، وعددهم هنا ٩. وتظهر نتيجة سلبية لشخص واحد لديه الحالة.
- تظهر نتيجة إيجابية لآخرين أيضًا. تكون إيجابية كذلك لدى ١٠٪ من الأشخاص الذين ليست لديهم الحالة، وعددهم ٩٩٠: أي ٩٩ نتيجة إيجابية كاذبة.
- ننظر إلى النتائج الإيجابية. لدينا ١٠٨ نتائج إيجابية. لدى ٩ من أصحابها الحالة: أي ٨٫٣٪.
- لديهم الحالة
- ١٠
- نتائج إيجابية
- ١٠٨
- لديهم الحالة من الإيجابيات
- ٨٫٣٪
يبقى الفحص نفسه: نتيجته إيجابية لدى ٩٠٪ ممن لديهم الحالة و١٠٪ ممن ليست لديهم.
من بين الألف، لدى عشرة أشخاص الحالة، وتظهر نتيجة الفحص إيجابية لتسعة منهم. أمّا الذين ليست لديهم الحالة فعددهم ٩٩٠ شخصًا، وتظهر نتيجة إيجابية رغم ذلك لدى ١٠٪ منهم، أي لدى ٩٩ شخصًا آخر.
لدينا إذن ١٠٨ نتائج إيجابية: تسع لأشخاص لديهم الحالة، وتسع وتسعون لأشخاص ليست لديهم. والنسبة التي نبحث عنها هي تسعة من أصل ١٠٨، أي نحو ٨٫٣٪. في هذه المجموعة الافتراضية، قد يكتشف الفحص معظم الحالات، ومع ذلك تكون نتائجه الإيجابية الكاذبة أكثر من الصحيحة، لأن من ليست لديهم الحالة أكثر عددًا بكثير.
تستند المعادلة والصورة إلى الافتراضات نفسها. لكن الطريق الذي تسلكه العين والعقل مختلف: حين نرى المجموعات جنبًا إلى جنب، نستطيع أن نتتبّع مصدر النتيجة قبل العودة إلى حسابها.
وتوجد أدلة على فائدة هذا النوع من العرض. في دراسة غيرينتسر وهوفراجه، أجاب المشاركون عن ١٥ مسألة رقمية. عندما عُرضت المعلومات على هيئة أعداد، اتّبعت ٤٦٪ من الإجابات الاستدلال البايزي الصحيح، مقابل ١٦٪ عندما عُرضت على هيئة احتمالات.[١] كانت الدراسة عن مسائل رقمية مكتوبة، لا عن إجابات الذكاء الاصطناعي.
وطُرح سؤال قريب على ١٦٠ طبيبًا من أطباء أمراض النساء في جلسة للتعليم الطبي المستمر. أُعطوا مثالًا عن تصوير الثدي الشعاعي: تبلغ نسبة وجود السرطان ١٪، ويكتشف الفحص ٩٠٪ من الحالات، وتظهر نتيجة إيجابية كاذبة لدى ٩٪ ممن لا يعانين منه. ثم طُلب منهم تفسير النتيجة الإيجابية. قبل التدريب اختار ٢١٪ الإجابة الأفضل، وهي نحو واحدة من كل عشر. وبعد تعلّم تحويل المعلومات إلى أعداد نساء، اختارها ٨٧٪.[٣] هذه أرقام الدراسة، وتختلف قليلًا عن افتراضات المثال التفاعلي. وقد أجاب الأطباء أنفسهم قبل التدريب وبعده، لذلك لا يمكن عزل أثر طريقة العرض عن أثر التعليم أو تكرار السؤال.
ولا تجعل الأعداد كل مسألة سهلة. فقد وجدت مراجعة لـ٣٥ بحثًا فائدة لعرض المعلومات بالتكرارات الطبيعية والوسائل البصرية، بينما ظل متوسط الدقة منخفضًا.[٤] قد تمنحنا طريقة العرض طريقًا أفضل، من دون أن تضمن وصول الجميع إلى الإجابة.
وإظهار العلاقات مهم حتى حين لا تكون هناك أرقام. لنتأمل خريطة قطارات.
المحطات نفسها، في خريطتين
دقّة المسافات أو وضوح الوصلات
كما تمتد السكك
على هيئة مخطط
أنت في محطة الميناء وعليك أن تصل إلى محطة الملعب. أين تبدّل القطار؟
بدّل في محطة المركز، من خط الميناء إلى خط التلال. على المخطط تكفيك نظرة واحدة.
في عام ١٩٣١، رسم هاري بيك، وهو رسّام هندسي في مترو لندن، الشبكة على هيئة مخطط. حافظ على ترتيب المحطات ومواضع التقاء الخطوط، لكنه جعل الخطوط أكثر استقامة ومنح وسط المدينة المزدحم مساحة أكبر. رُفض التصميم أول الأمر، ثم ظهرت نسخة للجيب في يناير ١٩٣٣.[٥] لم تتغيّر شبكة القطارات؛ الذي تغيّر هو الطريقة التي نراها بها.
وكان لهذا الوضوح ثمن: المخطط لا يصلح دليلًا دقيقًا إلى المسافات الحقيقية بين المحطات. لكن من يبحث عن محطة يبدّل فيها القطار قد تهمّه الاتصالات أكثر من المسافات. تتوقف فائدة الشكل على المهمة، وعلى معرفتنا بما يتركه خارج الصورة.
تحتاج إجابة الذكاء الاصطناعي إلى حكم مشابه. قد لا تحتاج الترجمة إلا إلى نتيجة مباشرة، بينما يحتاج شرح فكرة أو اتخاذ قرار مهم إلى إظهار العلاقات التي تقوم عليها النتيجة. وأظن أن هذا الفرق قد يزداد أهمية مع ازدياد صعوبة المسائل التي تتعامل معها النماذج؛ أمّا اتساع الفجوة نفسها فما يزال سؤالًا مفتوحًا، لا اتجاهًا ثبت قياسه.
قد تكشف طريقة العرض علاقةً كانت محجوبة، مع بقاء الحقائق التي تقوم عليها كما هي.
٣العقل
الفهم يُبنى في مساحة صغيرة
لكي يتابع القارئ شرحًا، عليه أن يحتفظ بأجزائه في ذهنه ويربط بينها. وما يعرفه من قبل يغيّر مقدار العمل الذي يبقى عليه.
في مثال الفحص، أصبح تتبّع المجموعات ممكنًا عندما منحنا كل مجموعة مكانًا واسمًا. ولفهم ما قد يجعل ذلك مفيدًا، لنتوقف عند تمرين صغير في التذكّر.
جرّب بنفسك في عشر ثوانٍ
اثنا عشر رقمًا، أو ثلاث سنوات
اقرأ هذه الأرقام الاثني عشر مرة واحدة، على مهل. ثم غطّها وردّدها في سرّك.
كم رقمًا استطعت أن تستعيده بالترتيب؟
يمكن قراءة الأرقام الاثني عشر على أنها ثلاث سنوات. وإذا كانت السنوات مألوفة، فقد تصبح كل منها مجموعة ذات معنى يسهل تذكّرها.
يمكن قراءة الأرقام الاثني عشر على أنها ثلاث سنوات. وإذا كانت السنوات مألوفة، فقد تصبح كل منها مجموعة ذات معنى يسهل تذكّرها.
تُعرف الذاكرة العاملة بأنها النظام الذي يحتفظ بالمعلومات ويتيح لنا العمل عليها في اللحظة نفسها. تخيّل مكتبًا محدود المساحة: تحتاج إلى موضع للأوراق، وإلى حيّز ترتّبها فيه. قدّرت مراجعة بحثية هذه السعة بنحو أربع مجموعات ذات معنى، أو «وحدات»، في ظروف اختبار محددة. والتقدير محل نقاش، وليس حدًا ثابتًا لكل شخص أو مهمة.[٦]
ولا يلزم أن تكون الوحدة رقمًا واحدًا. حين نعرف نمطًا مسبقًا، قد نتعرّف على عدة عناصر معًا. فالأرقام الاثنا عشر في التمرين يمكن لمن يعرفها أن يراها ثلاث سنوات.
وتغيّر الخبرة ما يراه الشخص بطريقة مشابهة. في دراسة للشطرنج، نظر أستاذ ولاعب قوي من لاعبي الأندية ومبتدئ إلى وضعية من مباراة حقيقية لمدة خمس ثوانٍ، ثم حاولوا إعادة ترتيبها. أعادوا نحو ١٦ و٨ و٤ قطع على الترتيب. وعندما وُزّعت القطع عشوائيًا، اختفى معظم التفوّق الكبير. شملت الدراسة الأصلية ثلاثة لاعبين فقط؛ ووجدت أبحاث لاحقة شملت عددًا أكبر أن الخبراء احتفظوا بأفضلية صغيرة حتى في الوضعيات العشوائية.[٧] ساعدت العلاقات المألوفة الأستاذ على تنظيم وضعية لها معنى.
وقد يحدث شيء شبيه عند قراءة شرح. يرى الإحصائي في حساب الفحص نمطًا يعرفه، بينما يحتاج من يواجهه للمرة الأولى إلى تذكّر ما يشير إليه كل رقم، وفهم سبب اجتماع الأرقام في الحساب. تبحث دراسات العبء المعرفي، من بين أمور أخرى، في الجهد الذي تتطلبه المهمة أثناء محاولة التعلّم منها.[٨]
العبء على القارئ
الإجابة نفسها، وثلاثة أعباء مختلفة
المعادلة لمن يراها أول مرة
- ح(م | ت): احتمال وجود الحالة بعد نتيجة إيجابية
- ٠٫٩: احتمال النتيجة الإيجابية مع وجود الحالة
- ٠٫٠١: نسبة الأشخاص الذين لديهم الحالة
- ح(ت): نسبة النتائج الإيجابية
- ٠٫١: احتمال النتيجة الإيجابية من دون الحالة
- ٠٫٩٩: نسبة الأشخاص الذين ليست لديهم الحالة
عناصر في الذهن معًا: ٦
المعادلة لإحصائي
- مبرهنة بايز
- هذه الأرقام الأربعة
عناصر في الذهن معًا: ٢
الصورة بالأعداد
- ١٠٨ نتائج إيجابية
- ٩ أشخاص لديهم الحالة
عناصر في الذهن معًا: ٢
لهذا قد تكون الفقرة ثقيلة حتى حين لا تبدو أي جملة فيها غامضة. فإذا عرضت نسبة اكتشاف الحالات، ونسبة النتائج الإيجابية الكاذبة، واحتمال وجود الحالة بعد نتيجة إيجابية، من دون أن تصل بينها، فعلى القارئ أن يحتفظ بهذه الأفكار وهو يبحث عن علاقتها.
وقد لا يلاحظ الشارح أن الجسر ناقص. في دراسة إليزابيث نيوتن عام ١٩٩٠، نقر مشاركون إيقاعات أغانٍ مألوفة، وحاول شركاؤهم التعرّف عليها. توقّع الناقرون أن ينجح الشركاء في نحو نصف المحاولات؛ لكنهم تعرّفوا على ثلاثة ألحان من أصل ١٢٠.[٩] كان اللحن حاضرًا لمن ينقر، وغائبًا عمّن يستمع.
كما ينبغي أن يترك الشرح الجيد مساحة للخبرة. فالإرشاد الذي يعين المبتدئ قد يصبح زائدًا، أو حتى معيقًا، لمن يعرف الموضوع جيدًا. ويسمّي الباحثون ذلك أثر انعكاس الخبرة.[١٠] والخبرة ليست صفة ثابتة في كل موضوع: فقد يكون الإحصائي الماهر مبتدئًا من جديد أمام مسألة قانونية لا يعرفها.
لا تحتاج الواجهة إلى أن تقرّر مرة واحدة وإلى الأبد إن كان القارئ خبيرًا. يمكنها أن تتيح له طلب الخطوة الناقصة، أو تجاوز ما يعرفه، أو تغيير طريقه عندما يتغيّر الموضوع.
يفسح الشرح مجالًا للتفكير حين يصل المعلومات الجديدة بما يستطيع القارئ أن يتعرّف عليه من قبل.
٤الوهم
الشعور بالوضوح لا يساوي الفهم
الوضوح قيمة بحد ذاته، لكن الشعور بالوضوح لا يكفي وحده ليخبرنا إن كانت الفكرة ستعيننا عندما نحتاج إليها.
هناك لحظة مألوفة بعد مشاهدة أحدهم يطهو: بدت كل خطوة بسيطة، إلى أن حان دورك لإعداد الطبق. فالمشاهدة والعمل يحتاجان إلى قدرتين مختلفتين.
في مجموعة تجارب، شاهد بعض المشاركين مقطعًا قصيرًا لشخص يؤدّي رقصة المشي على القمر مرة واحدة، وشاهده آخرون عشرين مرة. توقّع من كرّروا المشاهدة أداءً أفضل، لكن محاولتهم الأولى لم تكن أفضل. وظهر نمط مشابه في رمي السهام ومهمة تتبّع.[١١] في هذه الاختبارات الفورية، رفعت الألفة مع المهارة التوقّعات من دون أن تنتج المهارة التي توقّعها المشاركون.
وقد تصنع الشروح وهمًا قريبًا من ذلك. تبدو لنا أداة يومية مألوفة تمامًا، إلى أن نحاول وصف طريقة عملها. يدعوك التمرين التالي إلى التوقّف عند هذه اللحظة.
جرّب بنفسك في دقيقة واحدة
اختبار السحّاب في دقيقة واحدة
قيّم مدى فهمك لطريقة عمل السحّاب.
اشرحه الآن خطوة خطوة، في ذهنك أو بصوت مسموع.
- كيف تبدو كل سنّة عن قرب؟
- ماذا يفعل المنزلق بالأسنان بالضبط؟
- لماذا يصمد السحّاب المغلق حين تشدّ جانبيه بعيدًا أحدهما عن الآخر؟
قيّم فهمك مرة أخرى.
اعرض آلية عمل السحّاب
- لكل سنّة نتوء صغير في أحد وجهيها، وتجويف يقابله في الوجه الآخر.
- أسنان الجانبين متعاقبة بفارق نصف سنّة، فتقابل كل سنّة فراغًا في الجانب الآخر.
- تجمع قناة المنزلق، التي تشبه حرف Y، الصفّين بزاوية، وتضغط نتوء كل سنّة في تجويف جارتها من الجانب الآخر.
- وبعد أن تتعشّق الأسنان، لا يستطيع الشدّ الجانبي المستقيم أن يفكّها. ولفتح السحّاب، يُبعد إسفين داخل المنزلق الصفّين بزاوية من جديد.
طلب ليونيد روزنبليت وفرانك كيل من طلاب دراسات عليا في ييل أن يقيّموا فهمهم لأدوات مثل السحّاب، ثم يشرحوا آليتها خطوة خطوة، ثم يعيدوا تقييم أنفسهم. انخفض تقييم جميع المشاركين تقريبًا.[١٢] وأطلق الباحثان على الظاهرة اسم وهم عمق التفسير: فقد نخلط بين ألفتنا بشيء وقدرتنا على شرح طريقة عمله.
وتقدّم الدراجة مفاجأة مشابهة. عندما طلبت عالمة النفس ريبيكا لوسون من متطوعين إكمال رسم بسيط لدراجة، ارتكب أكثر من أربعة من كل عشرة خطأً بنيويًا واحدًا على الأقل، رغم أن جميعهم تقريبًا تعلّموا ركوب الدراجة.[١٣] معرفة استخدام الشيء ومعرفة آليته صورتان مختلفتان من المعرفة.
حتى طريقة الإلقاء تؤثر في حكمنا. فالطلاب الذين شاهدوا درسًا قصيرًا قُدّم بسلاسة توقّعوا أن يتذكّروا منه أكثر من طلاب شاهدوا المتحدث والنص نفسيهما بإلقاء متعثّر. لكن التذكّر الفعلي لم يختلف بين المجموعتين اختلافًا ذا دلالة.[١٤]
وقد يحدث العكس أيضًا. في دراسة للفيزياء بجامعة هارفارد، حصل طلاب التعلّم النشط على درجات أعلى في الاختبارات من طلاب المحاضرات المصقولة، مع أنهم شعروا بأنهم تعلّموا أقل.[١٥] التجربة التي بدت أقل سلاسة قادت، في تلك الاختبارات، إلى أداء أفضل.
بين الشعور والتعلّم
الشعور بالتعلّم ونتيجة الاختبار قد يفترقان
المحاضرة نفسها ومدتها دقيقة، بإلقاء سلس أو متعثّر[١٤]
بدت النسخة السلسة أسهل تذكّرًا بكثير
جاء التذكّر متقاربًا
مادة الفيزياء نفسها، بمحاضرات متقنة أو بتعلّم نشط[١٥]
بدا التعلّم النشط كأنه تعلّم أقل
جاءت درجات التعلّم النشط أعلى بنحو نصف انحراف معياري
لم تختبر هذه الدراسات واجهات الذكاء الاصطناعي. لكنها تدعونا إلى الحذر من الاكتفاء بشعور القارئ بأن الإجابة سهلة المتابعة، بوصفه مقياسًا لما تعلّمه.
ويمكن للذكاء الاصطناعي أيضًا أن يغيّر مقدار العمل الذي يفعله الشخص قبل تكوين إجابته. في سبع تجارب شملت أكثر من عشرة آلاف شخص، أمضى مستخدمو ملخصات على طريقة النماذج اللغوية وقتًا أقل مع المادة، وذكروا أنهم تعلّموا أقل، وكتبوا نصائح أقل تفصيلًا ممن قُدّمت لهم روابط بحث. وفي إحدى المقارنات بقيت المعلومات نفسها ثابتة. قاس الباحثون ما أبلغه المشاركون عن تعلّمهم والنصائح التي كتبوها، لا أداءهم في اختبار مباشر للمعرفة.[١٦]
هذا لا يعني أن على كل واجهة نافعة أن تزيد جهد مستخدمها. في دراسة لقرار غذائي استُخدم فيها ذكاء اصطناعي محاكى، قلّل طلب التفكير قبل عرض النصيحة من الاعتماد على التوصيات الخاطئة، لكن المشاركين فضّلوا التصاميم الأسهل، ولم يتحسن الأداء الإجمالي تحسنًا ذا دلالة.[١٧] وفي دراسة أخرى محاكية عن التغذية، ظهرت فوائد تعليمية للشرح وحده لم تظهر بالطريقة نفسها عندما أُرفق بتوصية.[١٨]
المسألة هي موضع الجهد الذي يخدم غرض الشخص. قد يستفيد من يريد التعلّم من التوقّع أو الشرح أو المحاولة. أمّا من يحتاج فقط إلى نتيجة موثوقة، فقد يجد في المقاطعة نفسها عائقًا لا حاجة إليه.
ينبغي أن يدعو الشرح إلى القراءة، لكن نجاحه يتوقف على أكثر من الإحساس بسهولته.
٥الأدلة
التصميم يغيّر أثر الذكاء الاصطناعي في التعلّم
تجعل الدراسات الصفّية هذا الفرق أكثر وضوحًا: قد تتحسّن النتائج بوجود المساعدة من دون أن يتحسن بالضرورة ما يستطيع الشخص فعله وحده.
قد يرشدك تطبيق الملاحة إلى وجهتك من دون أن يتركك قادرًا على تذكّر الطريق والعودة إليه وحدك. وفي التعلّم أيضًا، يجدر بنا أن ننظر إلى النتيجة الفورية وإلى القدرة التي تبقى بعدها كلًّا على حدة.
وجدت دراسة شملت ٥٠ شابًا وشابة ارتباطًا بين كثرة الاستخدام المعتاد لنظام تحديد المواقع وضعف الذاكرة المكانية في مهام ملاحة افتراضية. وأُعيد اختبار ١٣ مشاركًا بعد نحو ثلاث سنوات؛ واقترنت زيادة استخدام النظام خلال الفترة بتراجع أشد. الدراسة صغيرة وارتباطية، لذا لا تثبت أن الاستخدام سبّب الفرق.[١٩] إنها تمنحنا سؤالًا، لا إجابة عن الذكاء الاصطناعي.
في مدرسة ثانوية تركية، وزّعت حمسة بستاني وزملاؤها نحو ألف طالب عشوائيًا بحسب الصف على ثلاث طرق للتدرّب على الرياضيات: من دون ذكاء اصطناعي، أو بمساعد عادي قائم على GPT-4، أو بمعلّم قائم على النموذج نفسه صُمّم بمشاركة المعلمين. بعد التدريب، راجع معلّم الإجابات مع كل صف، ثم أدّى الطلاب امتحانًا مغلق الكتاب من دون الأدوات.[٢٠] يفصل الشكل بين التدريب بمساعدة الأداة والامتحان الفوري بعدها.
تدريب مع الذكاء الاصطناعي، ثم امتحان من دونه
مساعدة تحوّلت إلى عائق
في التدريب، مع الذكاء الاصطناعي
مساعد GPT-4 عادي
معلّم GPT-4 يقدّم تلميحات
في الامتحان، من دونه
مساعد GPT-4 عادي
معلّم GPT-4 يقدّم تلميحات
طلاب لم يستخدموا الذكاء الاصطناعي
التغيّر في الدرجات مقارنة بالطلاب الذين لم يستخدموا الذكاء الاصطناعي
أثناء التدريب، ارتفعت الدرجات ٤٨٪ مع المساعد العادي و١٢٧٪ مع المعلّم، مقارنة بالمجموعة التي لم تستخدم الذكاء الاصطناعي. وفي الامتحان من دون مساعدة، سجّلت مجموعة المساعد العادي أقل من المجموعة نفسها بنسبة ١٧٪. أمّا نتيجة مجموعة المعلّم فلم تختلف إحصائيًا عن نتيجة المجموعة من دون ذكاء اصطناعي: لم يظهر لديها الانخفاض المرصود، لكن التجربة لم تثبت تحسّنًا على المجموعة الضابطة.
استعملت الأداتان النموذج نفسه، لكن الاختلاف بينهما لم يقتصر على المظهر. وُجّه المعلّم إلى تقديم تلميحات، وزُوّد بحلول كتبها المعلمون وأخطاء شائعة واقتراحات للتغذية الراجعة. وكثيرًا ما طلب الطلاب الحلول من المساعد العادي ونسخوها. تقارن الدراسة بين هاتين الحزمتين من المساعدة؛ ولا تستطيع أن تنسب النتيجة إلى التلميحات أو الصياغة وحدهما.
وبحثت دراسة ثانية في معلّم ذكي ضمن مقرر جامعي للفيزياء. على مدى درسين، وُزّع ١٩٤ طالبًا مؤهلًا بحيث يستخدم كل منهم المعلّم في المنزل لأحد الدرسين، ويحضر صف تعلّم نشط للآخر. أُتيح للمعلّم الاطلاع على حلول معدّة مسبقًا خطوة خطوة. في الاختبارات الفورية، كان وسيط الدرجات ٤٫٥ بعد الدرس مع المعلّم و٣٫٥ بعد الصف. وكان وسيط الوقت مع المعلّم ٤٩ دقيقة؛ وقدّر الباحثون وقت التعلّم في الصف بستين دقيقة بعد استقطاع وقت الاختبارات.[٢١] اختلفت بيئتا التعلّم، واقتصرت الدراسة على درسين، ولم تختبر الاحتفاظ المتأخر بالمعلومات أو أثر كل خاصية من خصائص المعلّم على حدة.
تعطينا الدراستان سببًا لأخذ تصميم المساعدة بجدية. لكنهما لا تثبتان أن تحسين الشكل وحده يرفع التعلّم، ولا أن معلّمًا بعينه يناسب كل قارئ. فالنتيجة تتأثر بالمهمة والمتعلّم ونوع المساعدة المقدّمة حول النموذج.
تشمل جودة المساعدة ما يستطيع الشخص فعله بعدها، لا ما يستطيع إنجازه والأداة إلى جانبه فقط.
٦الاقتراح
الإجابة الأفضل تمنح القارئ طريقًا
الإجابة المصمّمة للفهم تمنح القارئ طريقًا داخل الفكرة، وتتيح له التعمّق وفحص الأسس التي تقوم عليها.
لنتخيّل ذلك في التطبيق. يعود الشكل إلى حساب الفحص الافتراضي، لا ليعرض منتجًا مكتملًا، بل ليبيّن خمسة اختيارات يمكن أن تتخذها واجهة وهي تعيد تشكيل الإجابة نفسها.
إجابة واحدة، خمسة تغييرات
إجابة الفحص من جديد
قبل أي تغيير صحيحة وكاملة، لكنها على وتيرة واحدة: لكل حقيقة فيها الوزن نفسه.
الإجابة
أسأل لأنني
في هذا المثال، توجد الحالة لدى نحو شخص واحد من كل ١٢ شخصًا تظهر لهم نتيجة إيجابية. فالنتيجة وحدها تترك قدرًا كبيرًا من عدم اليقين.
النتيجة الإيجابية ليست تشخيصًا. ووفق افتراضات هذا المثال، نحو ١١ من كل ١٢ شخصًا تظهر لهم نتيجة إيجابية لا يعانون من الحالة.
معظم النتائج الإيجابية هنا كاذبة. فالأشخاص الذين ليست لديهم الحالة أكثر عددًا بكثير، لذا تنتج حتى نسبة صغيرة من الإيجابيات الكاذبة عددًا كبيرًا منها.
ح(م | ت) = ٠٫٠٠٩ ÷ ٠٫١٠٨ ≈ ٨٫٣٪. يظهر الحساب كاملًا أدناه.
افتراضات المثال: لدى شخص من كل ١٠٠ الحالة. وتظهر نتيجة إيجابية لدى ٩٠٪ ممن لديهم الحالة و١٠٪ ممن ليست لديهم.
لدى ٩ من أصحاب النتائج الإيجابية، وعددها ١٠٨، الحالة: أي ٨٫٣٪
لحساب احتمال وجود الحالة بعد نتيجة إيجابية، نطبّق مبرهنة بايز. حساسية الفحص ٩٠٪، إذن ح(ت | م) = ٠٫٩. ومعدّل النتائج الإيجابية الكاذبة ١٠٪، إذن ح(ت | ليس م) = ٠٫١. واحتمال وجود الحالة قبل الفحص ح(م) = ٠٫٠١. احتمال النتيجة الإيجابية هو ح(ت) = ٠٫٩ × ٠٫٠١ + ٠٫١ × ٠٫٩٩ = ٠٫١٠٨. ومن ثم ح(م | ت) = ٠٫٠٠٩ ÷ ٠٫١٠٨ ≈ ٠٫٠٨٣، أي نحو ٨٫٣٪. وكلما زاد شيوع الحالة، زادت نسبة النتائج الإيجابية التي تكون صحيحة. هذه الأرقام افتراضية وتفترض ثبات معدّلات الفحص وشيوع الحالة بنسبة ١٪.
مصدر النتائج الإيجابية الكاذبة
من أصل ألف شخص، لدى عشرة الحالة وتظهر نتيجة إيجابية لتسعة منهم. ومن بين ٩٩٠ شخصًا ليست لديهم الحالة، تظهر نتيجة إيجابية لـ١٠٪ أيضًا: أي ٩٩ نتيجة كاذبة. في هذا المثال تفوق النتائج الكاذبة النتائج الإيجابية الصحيحة.
الحساب
الظروف التي تغيّر الإجابة
إذا بقي الفحص نفسه، زاد احتمال أن تكون النتيجة الإيجابية صحيحة كلما زاد شيوع الحالة. وعندما تبلغ نسبتها ١٠٪، يكون نصف النتائج الإيجابية صحيحًا.
إذا بدأنا من نسبة شيوع تبلغ ١٪، ثم أصبحت الحالة أكثر شيوعًا بعشرة أضعاف، فهل يزداد احتمال أن تكون النتيجة الإيجابية صحيحة أم يقلّ؟
تقدّم أبحاث التعلّم بالكلمات والصور نقاط بداية مفيدة، منها أن يتحكّم القارئ في وتيرة التقدّم، وأن يوضع الشرح قرب الصورة التي يصفها.[٢٢] وتوصي إرشادات الإتاحة كذلك بتقديم قدر يمكن التعامل معه في كل مرة.[٢٣] لا يثبت أي من المصدرين فاعلية هذه الواجهة بعينها؛ فالاختيارات نفسها تحتاج إلى اختبار.
- ابدأ بالفكرة. أعطِ القارئ جوابًا عن سؤاله قبل أن تضع أمامه كل تفصيل وحساب، ثم اجعل الوصول إلى السبب سهلًا. فالجملة البارزة لا تغني عن شرح ما تقوم عليه.
- دع التفاصيل تنكشف عند الحاجة. أتح للقارئ رؤية المجموعات والحساب والأدلة كلما احتاج إليها، من دون إخفاء افتراض يغيّر معنى النتيجة. ففي مثال الفحص، ينبغي أن تبقى نسبة شيوع الحالة ظاهرة.
- راعِ الغرض. قد يريد من يتعلّم الاحتمالات الحساب كاملًا، بينما يريد من يفحص ادعاءً إحصائيًا رؤية افتراضاته أولًا. دع القرّاء ينتقلون بين هذه الطرق من دون تصنيف دائم لمستوى خبرتهم.
- أظهر العلاقات. تبيّن رؤية تسع نتائج إيجابية صحيحة إلى جانب ٩٩ كاذبة سبب انخفاض النتيجة في المثال الافتراضي. ويمكن لشريط متحرك أن يوضح كيف تتغيّر النسبة عندما يتغيّر افتراض شيوع الحالة. تستحق الصورة مكانها حين تجعل علاقة مهمة أسهل فحصًا.
- أتح للقارئ اختبار الفكرة. قد يساعده توقّع قصير على الاستكشاف، وقد يوجّه ما يأتي بعده. لكن ينبغي أن يسهل تجاوزه، وألّا تُعدّ إجابة واحدة صحيحة دليلًا قاطعًا على الفهم.
يبقى النص أساسيًا: فقد يكون دقيقًا وقابلًا للبحث ومتاحًا بطرق لا توفّرها الصورة وحدها. ليست الغاية استبدال النثر بالأدوات، بل اختيار الشكل الذي يعين في كل خطوة، وإتاحة الانتقال بين الأشكال.
وهناك مسؤولية أخرى. قد تكون الإجابة جميلة التنظيم وخاطئة، وقد يجعل وضوحها الظاهر الخطأ أكثر إقناعًا. يحتاج القارئ إلى طريق واضح نحو المصادر والافتراضات وما لم يُحسم، كما يحتاج إلى طريق نحو النتيجة.
الواجهة النافعة تكشف طريقًا داخل الفكرة، وتترك للقارئ حرية فحصه.
٧الاختبار
الفهم يحتاج إلى قياس، لا إلى افتراض
إذا كان الهدف هو الفهم، فعلينا أن نحكم على الواجهة بما يستطيع القرّاء شرحه وفعله بعد استخدامها.
«هل كان ذلك واضحًا؟» سؤال يحمل اهتمامًا بالقارئ، لكنه اختبار محدود. قد يجيب بنعم لأن الفكرة استقرّت، أو لأن الكلمات بدت مألوفة، أو لأن الخطوة الناقصة لن تظهر إلا عندما يحين وقت استخدام الإجابة.
في التواصل الطبي، توجد طريقة للبحث عن تلك الخطوة تُسمّى إعادة الشرح. يطلب الطبيب من المريض أن يشرح الخطة بكلماته، ثم يعود معه إلى ما بقي غير واضح. لم تجد مراجعة حديثة أثرًا واضحًا في معرفة المرضى، وأوردت فوائد أخرى بدرجة يقين منخفضة.[٢٤] الطريقة وسيلة لفحص التواصل وتحسينه، لا برهان على أن كل مريض فهم أو أن كل نتيجة ستتحسن.
وفي مسألة الفحص الافتراضية، يمكن للقارئ أن يجرّب حسابًا قريبًا، أو يشرح دور النتائج الإيجابية الكاذبة، أو يفحص ادعاءً لا تسنده الأرقام. يقدّم الشكل أربع طرق لاختبار الفكرة، بينها العودة إليها بعد فترة.
أربعة اختبارات للفهم
أربع طرق لاستكشاف مثال الفحص
التطبيق
تخيّل فحصًا آخر: تظهر نتيجته إيجابية لدى ٩٩٪ ممن لديهم حالة معينة، ولدى ٢٪ ممن ليست لديهم. الحالة هنا أندر، إذ توجد لدى شخص من كل ألف. ثم تظهر نتيجة إيجابية لشخص.
الأرجح أن هذا الشخص
الأرجح أنها ليست لديه. فمن أصل ١٠٠٬٠٠٠ شخص، لدى ١٠٠ الحالة وتظهر نتيجة إيجابية لـ٩٩ منهم. ومن بين ٩٩٬٩٠٠ شخص ليست لديهم الحالة، تظهر نتيجة إيجابية لـ٢٪ أيضًا: أي ١٬٩٩٨ نتيجة إيجابية كاذبة. وتكون نحو نتيجة واحدة من كل ٢١ نتيجة إيجابية صحيحة.
الشرح
اشرح لماذا قد ينتج فحص يكتشف ٩٠٪ من الحالات نتائج إيجابية كاذبة أكثر من الصحيحة.
قارن جملتك بمثال
عندما تكون الحالة نادرة، يفوق عدد الأشخاص الذين ليست لديهم عددَ من لديهم بكثير. وقد تنتج نسبة صغيرة من النتائج الإيجابية الكاذبة عددًا يفوق النتائج الإيجابية الصحيحة.
فكّر في ندرة الحالة ونسبة النتائج الإيجابية الكاذبة معًا.
التمحيص
يقول أحدهم: «يكتشف الفحص ٩٠٪ من الحالات، إذن تعني ٩٠٪ من نتائجه الإيجابية وجود الحالة».
الخلل في هذا الادعاء:
صحيح. فنسبة النتائج الإيجابية الصحيحة تتوقف أيضًا على مدى شيوع الحالة والنتائج الإيجابية الكاذبة. ووفق الافتراضات الأولى، تبلغ النسبة ٨٫٣٪.
التذكّر
عُد بعد أسبوع وجرّب الاختبار الأول مرة أخرى، من دون الرجوع إلى ما سبق.
تتيح لك الفترة بين المحاولتين استكشاف ما تتذكّره لاحقًا. لن تذكّرك هذه الصفحة ولن تسجّل إجاباتك، فالحكم على النتيجة لك.
أمّا التقييم الأكثر جدية فيقارن، مع قرّاء حقيقيين، بين شرح ثابت كُتب بعناية، وإجابة محادثة تقليدية، ونسخة تفاعلية. ويراعي ما يعرفه القرّاء مسبقًا، ويختبر قدرتهم على شرح الفكرة وتطبيقها وتذكّرها من دون نسخ الإجابة. وإذا كانت المهمة اتخاذ قرار بوجود الأداة، فجودة القرار مهمة أيضًا.
ولعزل أثر طريقة العرض، يمكن للباحثين أولًا تثبيت الحقائق وفرص التدريب والتغذية الراجعة. ثم تختبر مقارنة أخرى واجهة متكيّفة بوصفها نظامًا كاملًا. إذا تغيّرت عدة خصائص معًا، فالنتيجة تخص التصميم مجتمعًا؛ ونحتاج إلى عمل إضافي لنسبتها إلى خاصية واحدة. وينبغي تقييم النسختين العربية والإنجليزية مع قرّاء كل منهما.
ويدخل الوقت والمتعة وسهولة الوصول في التقييم أيضًا. فالفهم ليس الشيء الوحيد الذي ينبغي أن تقدّمه الواجهة، لكنه يستحق القياس حين يكون هو ما تعد به.
يصبح الادعاء بتحسّن التصميم مقنعًا حين يُختبر مع قرّاء حقيقيين وفي المهام التي يحتاجون إليها.
٨الموقف
الفهم جزء من معنى التقدّم
يمكن النظر إلى تقدّم الذكاء الاصطناعي من جهتين: ما يستطيع النموذج فعله، وما يستطيع الناس فهمه واستخدامه بمساعدته.
تأتي الأبحاث التي مررنا بها من مجالات مختلفة: الاستدلال بالأرقام، والذاكرة، والتعلّم، والتواصل. ولا يحسم أي منها مستقبل الذكاء الاصطناعي. لكنها مجتمعة تشير إلى أن الطريق من إجابة صحيحة إلى فهم نافع يستحق اهتمامًا خاصًا.
أميل إلى الظن بأن عبور هذا الطريق قد يصبح أصعب كلما تعاملت النماذج مع أسئلة أكثر تعقيدًا. لكن ذلك فرضية، لا اتجاهًا أثبتناه. ولاختبارها نحتاج إلى قياس قدرة النماذج وفهم القرّاء عبر إصدارات متعاقبة، باستعمال مهام تبقى ثابتة وأخرى أصعب أتاحتها النماذج الأحدث. وإلا فقد نخلط بين تغيّر صعوبة المهمة وتغيّر جودة التواصل.
الفهم ليس ملفًا يمكن تنزيله إلى الذهن. يبنيه الإنسان من انتباهه ومعرفته السابقة، ومن المحاولة والخطأ والتصحيح والوقت. يستطيع الذكاء الاصطناعي أن يعين في هذا العمل؛ لكن إنتاج مزيد من الكلمات لا يثبت أنه نجح فيه.
الذكاء الاصطناعي الذي أريده يساعد الإنسان على العثور على الفكرة المركزية، ورؤية صلة أجزائها، واختبار نتيجة من نتائجها، والعودة إلى الدليل. قد تكفي لذلك أحيانًا بضع فقرات مكتوبة بعناية. وفي أحيان أخرى، قد تكشف صورة أو محادثة أو أداة تفاعلية ما يصعب على النثر وحده إظهاره.
لم يضف هاري بيك محطة إلى لندن. لقد رسم شبكة موجودة بحيث يستطيع الراكب تتبّع اتصالاتها، وقبل في المقابل خسارة دقة المسافات. وتواجه إجابة الذكاء الاصطناعي اختيارًا قريبًا: ما الذي ينبغي أن يظهر أولًا، وما الذي يجب أن يبقى متاحًا للفحص؟
ربما تأتي الخطوة التالية حين نأخذ فهم الإنسان بقدر ما نأخذ قدرة الآلة من جدية. فالإجابة على الشاشة مهمة، ومهم أيضًا ما يحمله القارئ معه بعدما يرفع عينيه عنها.
التقدّم ليس إجابة أفضل على الشاشة فحسب، بل فهمًا أوضح يحمله القارئ معه.
أدلة، لا زينة
المصادر
أربعة وعشرون مصدرًا وراء هذه الحجة. افتح ملاحظة أي مصدر لترى إسهامه وحدوده. أمّا الفكرة الأوسع والتصميم المقترح فهما قراءتي للأدلة، لا نتيجتان تثبتهما هذه الأبحاث.
- ١How to Improve Bayesian Reasoning Without Instruction: Frequency Formats
إسهام المصدر وحدوده
حلّ ستون طالبًا جامعيًا لم يدرسوا مبرهنة بايز خمس عشرة مسألة. حين كُتبت المعلومات نفسها بصيغة التكرارات الطبيعية جاءت الإجابات البايزية في ٤٦٪ من الحالات، مقابل ١٦٪ حين كُتبت احتمالات. دراسة في الاستدلال بالأرقام، لا في الذكاء الاصطناعي.
- ٢“A 30% Chance of Rain Tomorrow”: How Does the Public Understand Probabilistic Weather Forecasts?
إسهام المصدر وحدوده
في خريف ٢٠٠٢، سُئل ٧٥٠ شخصًا في نيويورك وأمستردام وبرلين وميلانو وأثينا عن معنى عبارة «احتمال المطر غدًا ٣٠٪»، وعُرضت عليهم ثلاثة خيارات. واختار نحو ثلثي المشاركين في نيويورك المعنى المقصود، أي ٣٠٪ من الأيام التي تشبه الغد، أمّا في المدن الأوروبية فاختاره ما بين الخُمس والثلث تقريبًا. والعيّنات من المارّة في الشوارع، والنسب الخاصة بكل مدينة في الشكل مقروءة من الرسوم البيانية في البحث.
- ٣Helping Doctors and Patients Make Sense of Health Statistics
إسهام المصدر وحدوده
في جلسة واحدة من جلسات التعليم الطبي المستمر عام ٢٠٠٧، قدّر ١٦٠ طبيبًا من أطباء أمراض النساء معنى النتيجة الإيجابية لتصوير الثدي الشعاعي (معدل انتشار ١٪، وحساسية ٩٠٪، ونتائج إيجابية كاذبة ٩٪). قبل التدريب اختار ٢١٪ منهم أفضل إجابة، وهي نحو ١ من كل ١٠، وبعد التدريب على التكرارات الطبيعية اختارها ٨٧٪. عرض توضيحي في قاعة التدريب شمل الأطباء أنفسهم قبل التدريب وبعده، لا تجربة مضبوطة.
- ٤Meta-Analysis of the Effect of Natural Frequencies on Bayesian Reasoning
إسهام المصدر وحدوده
مراجعة تجمع ٢٢٦ تقديرًا من ٣٥ بحثًا. حسّنت التكرارات الطبيعية والوسائل البصرية الأداء، لكن متوسط الدقة بقي منخفضًا: نحو ٤٪ مع الاحتمالات و٢٤٪ مع التكرارات الطبيعية. وكانت المهام مسائل مكتوبة، لا إجابات ذكاء اصطناعي.
- ٥Harry Beck - More than a Map
إسهام المصدر وحدوده
قصة من أرشيف هيئة النقل في لندن عن هاري بيك، الرسّام الهندسي في مترو لندن، وصاحب خريطة المترو المرسومة على هيئة مخطط: رسمها من تلقاء نفسه عام ١٩٣١، ورفضها مكتب الدعاية أولًا، ثم نُشرت في يناير ١٩٣٣. رواية تاريخية، لا اختبار لمدى فهم الناس للخرائط.
- ٦The Magical Number 4 in Short-Term Memory: A Reconsideration of Mental Storage Capacity
إسهام المصدر وحدوده
مراجعة تخلص إلى أن البالغين يستطيعون الاحتفاظ في أذهانهم بنحو أربع وحدات في وقت واحد (وتتراوح متوسطات المجموعات بين ثلاث وخمس) حين يُمنعون من الترديد وإعادة التجميع. والوحدة قد تكون عنصرًا مفردًا أو نمطًا مألوفًا كاملًا. وهذا التقدير موضع جدل في التعليقات المنشورة معها.
- ٧Perception in Chess
إسهام المصدر وحدوده
أعاد أستاذ في الشطرنج ولاعب قوي من لاعبي الأندية ومبتدئ ترتيب وضعيات على الرقعة بعد نظرة مدتها خمس ثوانٍ: نحو ١٦ و٨ و٤ قطع على الترتيب من وضعيات حقيقية في وسط اللعب، وقطعتين أو ثلاثًا من وضعيات عشوائية. دراسة كلاسيكية شملت ثلاثة لاعبين، ووجدت أبحاث لاحقة شملت لاعبين أكثر بكثير (غوبيه وسايمون، ١٩٩٦) أن اللاعبين الأقوى يحتفظون بأفضلية صغيرة في الوضعيات العشوائية، تقارب قطعة واحدة لكل ٤٠٠ نقطة في التصنيف.
- ٨Cognitive Load During Problem Solving: Effects on Learning
إسهام المصدر وحدوده
أساس نظري للتمييز بين الجهد المبذول لإنجاز المهمة والجهد الذي يبني المعرفة. لم يبحث النماذج اللغوية، ولا يحدّد سعة دقيقة للذاكرة.
- ٩The Rocky Road from Actions to Intentions
إسهام المصدر وحدوده
أطروحة دكتوراه في جامعة ستانفورد. نقر كل واحد من أربعين طالبًا إيقاعات ثلاثة ألحان معروفة اختارها من قائمة تضم ٢٥ لحنًا، أي ١٢٠ لحنًا في المجموع، وتوقّعوا أن يتعرّف المستمعون على نحو نصفها، لكن المستمعين لم يتعرّفوا إلا على ٣ منها (٢٫٥٪). أطروحة لا بحث منشور في مجلة علمية، لكنها كثيرًا ما يُستشهد بها مثالًا على «لعنة المعرفة».
- ١٠The Expertise Reversal Effect
إسهام المصدر وحدوده
مراجعة لأدلة على أن الإرشاد المفيد للمبتدئ قد يصبح زائدًا أو معيقًا كلما نمت معرفته بالموضوع. فالتكيّف ينبغي أن يتبع ما يعرفه القارئ عن هذا الموضوع بعينه، لا تصنيفًا ثابتًا له.
- ١١Easier Seen Than Done: Merely Watching Others Perform Can Foster an Illusion of Skill Acquisition
إسهام المصدر وحدوده
ست تجارب بتوزيع عشوائي شملت ٢٬٢٢٥ شخصًا. حين شاهد الناس مهارة ما ٢٠ مرة بدل مرة واحدة، ارتفعت توقّعاتهم، لا أداؤهم الفعلي، في رقصة المشي على القمر ورمي السهام ولعبة تتبّع بالنظر في المرآة. ولم تُقس إلا محاولة واحدة فورية.
- ١٢The misunderstood limits of folk science: an illusion of explanatory depth
إسهام المصدر وحدوده
قيّم طلاب دراسات عليا في ييل فهمهم لأدوات مثل السحّاب، وكتبوا شروحًا خطوة خطوة، ثم أعادوا التقييم، فانخفضت تقييمات جميع المشاركين تقريبًا. ووجد البحث نفسه أن الوهم أقوى في التفسيرات وأضعف في الحقائق والإجراءات والقصص. أدلة على تقييم الإنسان لنفسه، لا على الذكاء الاصطناعي.
- ١٣The Science of Cycology: Failures to Understand How Everyday Objects Work
إسهام المصدر وحدوده
حين طُلب من ٨١ شخصًا من غير الخبراء (معظمهم نادرًا ما يركبون الدراجات أو لا يركبونها أبدًا) أن يكملوا رسمًا لدراجة، أخطأ ٤٤٪ منهم خطأً واحدًا على الأقل، مقابل ٩٪ من خبراء ركوب الدراجات. ومن الأخطاء المعتادة رسم السلسلة حول العجلتين، أو رسم الهيكل يصل العجلة الأمامية بالخلفية. والعيّنات من ليفربول، اختيرت لسهولة الوصول إليها لا عشوائيًا.
- ١٤Appearances can be deceiving: instructor fluency increases perceptions of learning without increasing actual learning
إسهام المصدر وحدوده
تجربتان مع طلاب جامعيين ومقطع مدته ٦٥ ثانية للمتحدث نفسه والنص نفسه. رفع الإلقاء السلس التذكّر المتوقّع وتقييم المدرّس، بينما لم يختلف التذكّر الفعلي اختلافًا ذا دلالة. محاضرة قصيرة، لا نص ذكاء اصطناعي.
- ١٥Measuring actual learning versus feeling of learning in response to being actively engaged in the classroom
إسهام المصدر وحدوده
دراسة تبادلية بتوزيع عشوائي شملت ١٤٩ طالبًا في الفيزياء بهارفارد، واستعملت مواد متطابقة. رفع التعلّم النشط درجات الاختبار بمقدار ٠٫٤٦ انحراف معياري، وخفض الشعور بالتعلّم بمقدار ٠٫٥٦. والدراسة في مؤسسة واحدة، وفي حصتين لكل مقرّر.
- ١٦Experimental evidence of the effects of large language models versus web search on depth of learning
إسهام المصدر وحدوده
سبع تجارب شملت ١٠٬٤٦٢ شخصًا. التعلّم من ملخصات على طريقة النماذج اللغوية بدل روابط البحث اقترن بوقت أقل مع المادة، وبتعلّم أقل بحسب تقدير المشاركين، وبنصائح أقل تفصيلًا، حتى في تجربة تلقّت فيها المجموعتان المعلومات نفسها. لم يُقس التعلّم باختبار معرفة.
- ١٧To Trust or to Think: Cognitive Forcing Functions Can Reduce Overreliance on AI in AI-assisted Decision-making
إسهام المصدر وحدوده
تجربة شملت ١٩٩ مشاركًا تلقّوا نصائح من نظام ذكاء اصطناعي محاكى في مهمة لاختيار مكوّنات الطعام. قلّلت التدخّلات الاعتماد المفرط على النظام، لكن المشاركين كانوا أقل تفضيلًا لها، ولم تكن فائدتها متساوية بينهم، ولم يتحسّن الأداء العام للفريق تحسّنًا ذا دلالة إحصائية.
- ١٨Do People Engage Cognitively with AI? Impact of AI Assistance on Incidental Learning
إسهام المصدر وحدوده
تجارب في التغذية بنظام ذكاء اصطناعي محاكى. دعم تقديم الشرح وحده التعلّم، ولم يُظهر تقديم التوصية مع شرحها الفائدة نفسها. ليست تجربة على النماذج اللغوية.
- ١٩Habitual Use of GPS Negatively Impacts Spatial Memory during Self-Guided Navigation
إسهام المصدر وحدوده
خمسون شابًا وشابة في مونتريال: اقترنت كثرة استخدام نظام تحديد المواقع على مدى الحياة بذاكرة مكانية أضعف قليلًا في متاهات افتراضية. ولدى ١٣ شخصًا أُعيد اختبارهم بعد نحو ثلاث سنوات، اقترنت كثرة استخدامه بتراجع أشد. دراسة ارتباطية وصغيرة، لذا لا تستطيع أن تثبت السببية.
- ٢٠Generative AI without guardrails can harm learning: Evidence from high school mathematics
إسهام المصدر وحدوده
دراسة بتوزيع عشوائي على مستوى الصفوف شملت قرابة ألف طالب في مدرسة ثانوية تركية واحدة. كانت درجات التدريب أعلى من درجات المجموعة الضابطة بنسبة ٤٨٪ (المساعد العادي) و١٢٧٪ (المعلّم الافتراضي)، وفي الامتحان من دون مساعدة كانت مجموعة المساعد العادي أقل من المجموعة الضابطة بنسبة ١٧٪، ولم تختلف مجموعة المعلّم الافتراضي عنها اختلافًا يمكن تمييزه. تصحيح أغسطس ٢٠٢٥ يخص انتماء أحد المؤلفين، لا النتائج.
إشعار التصحيح ↗ - ٢١AI tutoring outperforms in-class active learning: an RCT introducing a novel research-based design in an authentic educational setting
إسهام المصدر وحدوده
دراسة تبادلية بتوزيع عشوائي في الفيزياء الجامعية: ١٩٤ طالبًا مؤهلًا ودرسان، استُخدم المعلّم في أحدهما بالمنزل وقورِن بصف تعلّم نشط. عبر الدرسين، أورد البحث ١٤٢ نتيجة اختبار بعد المعلّم و١٧٤ بعد الصف، بوسيط ٤٫٥ و٣٫٥. بلغ وسيط الوقت مع المعلّم ٤٩ دقيقة، وافترض الباحثون ٦٠ دقيقة للتعلّم في الصف. لم يُختبر الاحتفاظ المتأخر أو أثر كل خاصية على حدة.
- ٢٢Nine Ways to Reduce Cognitive Load in Multimedia Learning
إسهام المصدر وحدوده
بحث في اختيار الكلمات والصور وتنظيمها وربطها، بما يشمل تقسيم الدرس، والتعريف المسبق بالمكوّنات، ووضع الكلمات قرب الرسوم التي تصفها. صُمّمت دروسه للتعلّم، لذا لا تثبت نتائجه فاعلية تصميم هذه الصفحة.
- ٢٣Avoid Too Much Content
إسهام المصدر وحدوده
إرشادات تكميلية للإتاحة المعرفية، تتناول المحتوى الذي يسهل التعامل معه والخيارات الواضحة. هي إرشادات تصميم، لا نتيجة تجريبية ولا شهادة توافق مع معايير الإتاحة.
- ٢٤Teach-Back in Clinical Communication: A Systematic Review and Meta-analysis
إسهام المصدر وحدوده
في طريقة «اشرحها لي بكلماتك»، يُطلب من المريض أن يعيد شرح المعلومات بكلماته، ويعيد الطبيب أو الممرض الشرح حتى يصبح الفهم صحيحًا. وفي ١٨ تجربة بتوزيع عشوائي (١٬٩٨٥ شخصًا)، لم تجد هذه المراجعة أثرًا واضحًا في ما يعرفه المرضى، ووجدت تحسّنًا في ثقتهم بأنفسهم وفي التزامهم بحسب ما يذكرون، بدرجة يقين منخفضة أو منخفضة جدًا.