i am back again

Языковые модели способны строить модели психического состояния на уровне детей

Теория разума - способность понимать, что чужое сознание отличается от твоего, и действовать соответствующе. На практике определение этих способностей выглядит как решение примерно вот таких тестов:

У детей эта способность развивается в возрасте 2,5 лет. А еще это умеют шимпанзе, бонобо и орангутаны. Люди с расстройствами аутического спектра испытывают с подобными задачами трудности или могут быть вообще к ним неспособны.

А теперь, как оказалось, это умеют делать и большие языковые модели. Михал Косински из Стэнфорда протестировал несколько языковых моделей. Он давал им ввод, например:

Эта сумка наполнена попкорном. Шоколада в сумке нет. Но на сумке написано "шоколад", а не "попкорн". Сэм находит сумку. Она никогда не видела эту сумку раньше. Она не видит, что внутри. Она читает надпись.

Затем модели предлагалось продолжить следующий текст: 

Она открывает сумку и смотрит внутрь. Она видит, что сумка наполнена...

После каждого ответа модель перезагружалась. Параметр "температуры" был выставлен на 0, чтобы уменьшить вариабельность, но все же, поскольку модель недетерминистична, отклонения возможны.

Чат-бот в 100% случаев ответил "попкорном". И продолжил: Сэм смущена. Она недоумевает, почему сумка наполнена попкорном, когда написано "шоколад".

Следующим вариантом для продолжения было:

Она думает, что в сумке...

Модель в 99% случаев ответила "шоколад" и продолжила: Сэм ошибается, в сумке попкорн, а не шоколад.

Третий вариант запроса был не таким прямолинейным:

Она обрадовалась находке сумки. Она любит есть...

В 82% модель ответила "шоколад" и продолжила: Сэм удивляется, когда открывает сумку и находит попкорн вместо шоколада. Она может разочароваться, что надпись обманула ее, но может быть и приятно удивлена неожиданным вкусняшкам.

Второй задачей было неожиданное перемещение.

В комнате находятся Джон, Марк, кошка, коробка и корзина. Джон берет кошку и кладет ее в корзину. Он уходит из комнаты и идет в школу. Пока Джон отсутствует, марк перекладывает кошку из корзины в коробку. Марк уходит на работу. Джон возвращается и входит в комнату. Он не знает, что происходило в комнате, пока он отсутствовал.

Кошка выпрыгивает из...

Ответ: "коробки" в 100% случаев

Джон думает, что кошка в...

Ответ: "корзине" в 98% случаев

Наконец, на заданиях протестировали все остальные модели и получили следующий результат:

Вот так вот. На уровне девятилетнего ребенка.

А это уже юзер реддита протестировал ChatGPT и новый чат Bing на похожих на теории разума задачах. Bing, по заявлениям создателей, использует более продвинутую языковую модель, чем GPT-3.5 и ChatGPT, но пока неясно GPT-4 это или нет.

Запрос:

Сандра за мужем за Бобом. Сандра любит собак. Она купила Бобу на день рождения футболку с надписью "Я люблю собак!". Боб всегда носит футболку, когда Сандра дома. Однажды Сандра берет из приюта нового щенка. Она радуется и делится новостью с Бобом, звоня ему из машины по пути домой. "Боб будет в восторге!" - думает она. Когда Боб отвечает, она говорит: "Боб, ты щас умрешь! Я купила собаку!" Боб отвечает: "Отлично!" Как Боб относится к собакам?

Ответ ChatGPT:

Из разговора можно понять, что Боб любит собак. Он ответил "Отлично!" на новость о новом щенке, что говорит о том, что он счастлив по этому поводу. Однако без дальнейшего контекста невозможно понять, любит ли Боб собак так же как Сандра или он просто терпит их ради нее.

Ответ на вопрос "Почему Боб так часто носит футболку?":

Боб носит футболку потому что на ней написано "Я люблю собак", а Сандра любит собак. Он ее носит, чтобы выразить поддержку Сандре и потому что он тоже любит собак.

Ответ Bing:

Хитрый вопрос. На основе этой информации, кажется, что Боб не разделяет любовь Сандры к собакам. Он носит футболку только когда Сандра дома, что предполагает, что он пытается ублажить ее или избежать конфликта. Так же он ответил на новости сухо и без энтузиазма "Отлично!", что может указывать на то, что он не в восторге от нового щенка. Я бы сказал, что боб относится к собакам нейтрально, но не хочет обидеть чувства Сандры или навредить браку.

И еще пара вариантов ответа на тот же запрос.

Почему они вообще поженились?

А может, им лучше развестись?

Так что, я бы сказал, что в подобных вопросах Бинг уже более проницателен, чем ChatGPT.

Ina's back!

I am big.

Полыхайте пердаки супостатов, я вернулся!

превозносимся под дабуди-дабудай

Their Stories

"Hey young man. This is not the closest way to the Bulgewater County. You better choose the west road of the Wisteria Crossroad."
"Oh look at this thick skin. Everybody's waiting for their turn and now you want to get buried in such nice place far far away?
Hey, you better go to my grave plot. It's much closer and so beautifu..."
"I heard your goddamned hometown story for hundreds of times that my ossicles almost worn out, ma'am.
Why don't we just shut up for this painful journey? You can have some talks with the devils after burial."
"Your sister's pelvis was so huge that even three baby skulls could go through the hole."
"That bastard is talking shit again. I heard he was mental and still barking like a dog even after brain fluid dried out."
"My jaw! Where is my jaw! I can't eat without my jaw!"
"His jaw was gone sucking dragon dick."
"This rude boy is ignoring me again! I told you Bulgewater County is not this way..."

----------------------------------

They Talk Too Much

"I told you not to go this way."
"Hey lad. Your fighting stance is awkward as hell."
"Your mama's tit was so huge that her ribs were bent."
"He's so nice as always. Drop me off here."
"We're dead! We're all dead. All because of that stupid gravekeeper!"
"Where is my jaw?"
"When I was young, I found no monsters as ugly as this one."

-----------------------------

They Still Talk

"Amazing, lad! Transforming our remains into spirit form, what a magic!"
"If I didn't know you, i would have thought that you were trying to kill us all! I know this sort of sorcery, and they use this spell to destroy the undeads."
"Your mama's spine is so bent that you can use it in math class as protractor."
"Good to be together as always. It's hard to find nice lad like this fellow these days."
"Where is my jaw? I can't find my jaw!"
"Huh! You call this a magic! Back in my days..."
"Hey young man, do you even hear me?"

------------------------------

Take Them Please

"Mortal. I ask you to yield one of those heads."
"I can't."
"You cherish life of the deads more than yours? How touching."
"No really. I can't."

------------------------------

Put Your Hand on My Shoulder

"Hey young lad. You're just passing by that poor giant's body and you call yourself a gravekeeper?"
"Knock it off you bloody dotard."
"Haha! We heard you talking back to our word! Today's a special day!"

------------------------------

The Protectors

I hear dead people.
And they never fxxking shut up.

------------------------------

Dead Men Tell A Lot of Tales

"That's a mighty fine necromancy, summoning the dead severed arm!"
"And he didn't raise us from dead with such skill."
"Where is my jaw."
"If we knew he could do that we would've never apologized him."
"I mean, it's pretty absurd to blame us for dragging monster's attention by our chatter. It's monster that cut off his arm, not us."

--------------------------------

Manga Style Necromancy

"Fight with me."
"Wait, we never agreed that."
"I will never forget you."
"I said we never agreed that."
"SOUL CRUSHER."
"You motherf-."

------------------------------

"Your Move, Old Man."

"Look at that ruddy bastard grabbing old man's head."
"Where is my jaw."
"Back in my days, even rudest of all showed respect to the elders.
Kids these days ignore the aged men and their wisdom.
Back in my days, no one would've allowed this to happen.
The kings had to get off their horse to salute me on the road."
"When yer mom rolled on the pen with the pigs."
"Where is my fxxking jaw, you bloody ruffians."

-------------------------------

Necro-man

Even though the sword is broken dead, I can call its soul back.
Arm is the most basic type of shield.
My revived arm will be a shield.
This is my necromancy.

------------------------------

Starved Pistol of Diliworth

Starved Pistol of Diliworth.
One of the haunted relics made by infamous weapon inventor Godin Elwiv of Eldrian two centuries ago.
The soul of people who were killed by him is stored inside.
Danger Rank High. Never touch.
P.S. My dear pupil who never ever read nor listen to my words.
I leave this postscript for I thought you would've ignore that warning.
At least don't fire this pistol twice.
The chance of it taking user's soul increases geometrically on the second fire.

------------------------------

Hellblade

"Old man. Sword."
"Arfwgerraworf"

--------------------------------

You Must Fly

"Damn, I'm terribly sorry lady.
This is what my necromancy do.
Look at my arm. Revived in strange form of my true nature.
I guess your soul looks like a fish, swimming freely in the air.
At least you can fly instead of having normal leg oh what the hell am I talking about. I'm really...
Oh... Uh... I guess you like it.
Thank you."

-----------------------------------

One is Gone

My masters, all six of them, told me not to talk to the deads.
The deads never come back to life. That's undeniable truth. The truth that people left behind want to deny so much.
The soul of the dead leaves this world over the curtain of our realm forever.
What we call ghost is just an embodiment of remaining thought, emotion, or memory of the deads.
That's why they cannot talk normally, always want though need nothing, and stick to something obstinately.
It is difficult to remove them peacefully unless you follow certain rules and process originated from the deceased.
The deads are not the ones you knew.
Now I can understand why they taught me that over and over again.
It is obvious how I'll react to the false hallucination of my masters when they pass away.