Наука21 февруари 2023

Психолог за ChatGPT: като 9-годишно дете е

Само преди 2 г. чатботът не можел да се справи със задачи от теорията на ума

Михал Косински, компютърен психолог от Станфордския университет, предположи, че чатботът ChatGPT AI на Open AI е в състояние да създаде модел на психическото състояние на 9-годишно дете. Резултатите от проучването са публикувани в масива на arXiv.

Теорията на ума (ToM) или способността да се приписват ненаблюдаеми психични състояния на другите, е централна за човешките социални взаимодействия, комуникация, емпатия, самосъзнание и морал. Екипът на Косински тествал изкуствения интелект включително и с класически задачи за фалшиви убеждения, широко използвани за тестване на ToM при хора, на няколко езикови модела, без никакви примери или предварително обучение.

„Нашите резултати показват, че моделите на чатбота от преди 2022 г., не показват практически никаква способност за решаване на ToM задачи. Въпреки това версията на GPT-3 (davinci-002) от януари 2022 г. реши 70% от задачите на ToM, което е сравнимо с резултатите на седемгодишно дете. Нещо повече, неговата версия от ноември 2022 г. (davinci-003) реши 93% от ToM задачите, което е сравнимо с резултатите на деветгодишно дете“ - пише Косински.