Учени сравниха реакциите на човешкия мозък към изречения, съдържащи едни и същи думи, но с различен смисъл, разкривайки фундаментално разминаване с представите на изкуствения интелект.
Човешкият мозък се справя много по-добре от езиковите модели в разграничаването на субекта, извършващ дадено действие, от обекта, върху който то се извършва. До този извод достигат австралийски изследователи, които сравняват мозъчната активност по време на четене на изречения с репрезентациите, формирани от различни AI модели.
В експеримента, за който съобщава eLife, изследователите създават 108 изречения на английски език, в които променят подредбата на думите, запазвайки речниковия състав почти идентичен. Например, изречението „операторът донесе оборудването на режисьора” е преобразувано в „режисьорът донесе оператора при оборудването”.
Въпреки че наборът от думи остава практически същият, граматическите роли и общият смисъл на изреченията се променят. Подобни двойки позволяват да се установи дали даден модел отчита структурата на изречението, или разчита предимно на отделните думи.
По време на изследването тридесет души четат изреченията, докато се намират в апарат за ядрено-магнитен резонанс (ЯМР) с мощност 7 тесла, което позволява на учените да анализират мозъчната активност чрез функционален ЯМР.
