Тест тюринга мета тесту. Зворотній бік медалі

Викладачка з технологічного університету Джорджії (США) Джілл Вотсон протягом п'яти місяців допомагала студентам у роботі над проектами з дизайну комп'ютерних програм. Її вважали видатним педагогом аж до того моменту, коли з'ясувалося, що Джілл Вотсон не людина, а робот, система штучного інтелекту на базі IBMWatson. Цю історію розповіли у The Wall Street Journal.

Робот «Джіл» разом із ще дев'ятьма викладачами-людьми допомагала близько 300 студентам розробляти програми щодо дизайну презентацій, наприклад, грамотного підбору картинок-ілюстрацій.

Джилл допомагала студентам на інтернет-форумі, де вони здавали та обговорювали роботи, використовувала у своїй промові жаргонні та просторічні звороти на кшталт «угу» («Yep!»), тобто поводилася як звичайна людина.

«Вона мала нагадувати нам про дати дедлайну і за допомогою питань підігрівати обговорення робіт. Це було як звичайна розмова зі звичайною людиною», - розповіла студентка вишу Дженніфер Гевін.

Інший студент, Шрейяс Відьярті, уявляв собі Джилл як симпатичну білу жінку 20-ти років, що працює над докторською дисертацією.

Не запідозрив у людині робота навіть студент Баррік Рід, який два роки працював на IBM, створюючи програми для Джіл Уотсон. Навіть у імені «Вотсон» він не розгледів каверзи.

Робот був включений до університетської програми навчання, щоб позбавити викладачів величезного потоку питань, з якими до них звертаються в процесі навчання студенти. Робот "Джіл" здатний до навчання на відміну від інтернет-чатів.

Строго кажучи, цей робот-педагог склав знаменитий тест Алана Тьюринга, який протягом досить довгого часу вважався головним критерієм для відповіді на запитання «Чи можуть машини мислити?».

Тест Тьюринга - емпіричний тест, ідея якого була запропонована Аланом Тьюрингом у статті "Обчислювальні машини та розум", опублікованій у 1950 році у філософському журналі Mind. Т'юрінг став метою визначити, чи може машина мислити.

Стандартна інтерпретація цього тесту звучить так: «Людина взаємодіє з одним комп'ютером та однією людиною. На підставі відповіді на запитання він повинен визначити, з ким він розмовляє: з людиною чи комп'ютерною програмою. Завдання комп'ютерної програми — ввести людину в оману, змусивши зробити неправильний вибір».

Усі учасники тесту не бачать один одного. Якщо суддя не може сказати, хто з співрозмовників є людиною, то вважається, що машина пройшла тест. Щоб протестувати саме інтелект машини, а не її можливість розпізнавати мовлення, розмова ведеться в режимі «тільки текст», наприклад, за допомогою клавіатури та екрана (комп'ютера-посередника). Листування повинне проводитися через контрольовані проміжки часу, щоб суддя не міг робити висновків, виходячи зі швидкості відповідей. За часів Тьюринга комп'ютери реагували повільніше за людину. Зараз це правило теж необхідне, тому що вони реагують набагато швидше, ніж людина.

Алан Т'юрінг - знаменитий англійський математик і криптограф, який під час Другої світової війни розробив алгоритм для злому німецького шифратора «Енігма». Він починає свою статтю твердженням: «Я пропоную розглянути питання „Чи можуть машини думати?“». Т'юрінг підкреслює, що традиційний підхід до цього питання полягає в тому, щоб спочатку визначити поняття «машина» та «інтелект». Немов розуміючи, що це можна обговорювати до нескінченності, а користі буде небагато, Тьюрінг обирає інший шлях. Він пропонує замінити питання «Чи думають машини?» питанням «Чи можуть машини робити те, що можемо робити ми (як мислячі створіння)?».

У остаточній версії тесту Тюрінга журі має ставити запитання комп'ютеру, завдання якого - змусити членів журі повірити, що він є насправді людиною.

Навколо тесту Т'юрінга з часом розгорілися спекотні суперечки експертів з когнітивистики. Наприклад, американський філософ Джон Роджерс Серл у 1980 році написав статтю «Розум, мозок і програми», в якій висунув контраргумент, відомий як уявний експеримент «Китайська кімната». Серл наполягав, що навіть проходження роботами або програмами тесту Т'юрінга означатиме лише маніпуляцію символами, яких вони не розуміють. А без розуміння немає розуму. Отже тест Тьюринга невірний.

Експеримент "Китайська кімната" полягає в тому, що випробуваний поміщається в ізольовану кімнату, в яку йому через вузьку щілину передають питання, записані китайськими ієрогліфами. За допомогою книги з інструкціями з маніпуляцій з ієрогліфами, людина, яка зовсім не розуміє китайської писемності, зможе правильно відповісти на всі питання і ввести в оману того, хто їх ставить. Той вважатиме, що той, хто відповідає на його запитання, чудово знає китайську мову.

У ході дискусії, яка тривала усі 80-ті та 90-ті роки згадали навіть «млин Лейбниця», тобто уявний експеримент великого математика, описаний ним у книзі «Монадологія». Лейбніц пропонує представити машину завбільшки з млин, який міг би симулювати почуття, думки і сприйняття. Тобто зовні здавалася б розумною. Якщо зайти всередину такої машини, то жоден з її механізмів не буде свідомістю чи мозком. Думається, що Лейбніц і Серл у різний спосіб висловили одну й ту саму думку: навіть якщо машини здається мислячою, вона насправді не мислить.

Відповіді питанням «Чи можуть машини мислити?» немає і досі з однієї простої причини: вчені перестали сперечатися і намагаються створити такі машини. Можливо, вони колись досягнуть успіху в цьому. Однак, не виключено, що штучний інтелект обдурить навіть своїх творців, які повірять у його розумність і яка насправді буде лише маніпуляцією, але такою майстерною, що розкрити її людині виявиться не під силу. +

У фільмі видатного радянського режисера-документаліста Семена Райтбурта демонструється одна із спроб проходження тесту Т'юрінга роботом. У ході експерименту, який відтворюється у фільмі, кілька людей ставлять однакові питання двом невідомим співрозмовникам, намагаючись розпізнати, хто перед ними - машина чи людина. Зізнаюся, що особисто помилився, роботом виявився не той, на якого я подумав. Тому мені цілком зрозумілі почуття студентів «міс Джілл Вотсон», які півроку приймали її за людину.

Випробуйте себе, товариші!

Роботи, наділені свідомістю, здатні мислити, творити, спілкуватися – про цю ідею ми всі знаємо не з чуток, адже раз у раз на екранах з'являються нові фільми, в яких фігурують кіборги, наприклад, «Термінатор», «Я — Робот», « Прометей» і т.д. Та й новини все частіше рясніють заголовками про те, що вчені просунулися у створенні штучного розуму, зробили людиноподібну машину або про те, що нарешті пройдено тест Тьюринга. І тим, кого цікавить ідея штучного інтелекту, а також тим, хто не в курсі, що це за тест Тьюринга такий і чому навколо нього стільки галасу, напевно, буде цікавий матеріал, який ми підготували.

Почнемо ми з короткого огляду теми штучного інтелекту.

Штучний інтелект

Під терміном «штучний інтелект» прийнято розуміти науку і технологію створення наділених інтелектом машин і, що найбільше володіють інтелектом комп'ютерних програм. Однак нерідко цим поняттям називають також властивість різних інтелектуальних систем до виконання, які спочатку вважаються властивими тільки людині. Крім того, ідея штучного інтелекту пов'язана з подібним завданням застосування комп'ютерної техніки з метою зрозуміти людський інтелект.

Як науковий напрям штучний інтелект почав формуватися приблизно в середині минулого століття, коли сформувалася достатня кількість передумов для цього. Наприклад, філософи все більше сперечалися на тему природи людини та процесів пізнання світу, психологи та нейрофізіологи займалися розробкою теорій, що стосуються мислення та роботи людського мозку, математики та економісти проводили всілякі розрахунки та уявлення знань про світ і т.д. Таким чином і було закладено фундамент теорії алгоритмів, завдяки чому з'явилися перші комп'ютери.

Практика показала, що потенціал машин у плані твору обчислень набагато більший за людський, через що в колах вчених виникло питання: а який взагалі потенціал комп'ютерів, і чи зможуть машини з часом досягти рівня людського розвитку?

Так, в 1950 році одним з основоположників у сфері обчислювальної техніки, англійським вченим Аланом Тюрінгом у виданні «Mind» була написана стаття «Обчислювальні машини та розум», де описувалася процедура, завдяки якій можна отримати можливість визначення того моменту, коли машина стане на один щабель з людиною у плані своєї розумності. Ця процедура отримала назву тесту Тьюринга. Але, слід вважати, що реалізація тесту Тьюринга було б неможливою без створеного штучного інтелекту, і цього процесу вчені підходили з кількох позицій.

Підходи до створення штучного інтелекту

Насамперед слід виділити загальний підхід до створення штучного інтелекту, який передбачає, що він буде здатний до прояву поведінки, яка не відрізнятиметься від людської. До речі, представлену ідею можна назвати узагальненням підходу тесту Тьюринга, згідно з яким машину можна вважати розумною тоді, коли вона зможе вести розмову зі звичайною людиною, і він не зможе відрізнити її від іншої людини, за умови, що розмова йде в письмовій формі.

Другий підхід належить письменникам-фантастам. Він говорить про те, що штучний інтелект з'явиться тоді, коли машина зможе творити та відчувати. Але цей підхід не здатний витримати критики, якщо розглянути його детальніше. Наприклад, створити машину, яка проводитиме оцінку будь-яких параметрів внутрішнього або зовнішнього середовища і якось реагувати на них, за великим рахунком, не складно. Враховуючи те, що датчики реагуватимуть на певні подразники, про такий механізм вже можна сказати, що він має «почуття».

Третій похід називається символьним. По суті, саме він спочатку властивий епосі цифрових машин. Після того, як була створена перша мова символьних обчислень, розробники стали впевнені, що є шанс і практичної реалізації штучного інтелекту за допомогою технології символьних обчислень, завдяки чому стало б можливим мати справу зі слабоформалізованими смислами та уявленнями.

Був і логічний підхід до створення штучного інтелекту, заснований на моделюванні міркувань, і головним козирем якого була. Але з 90-х років минулого століття почав розвиватися агентно-орієнтований підхід, заснований на застосуванні інтелектуальних агентів і що передбачає, що інтелект є конкретно обчислювальною складовою потенціалу машини досягати поставленої перед нею мети.

А в результаті з'явився гібридний підхід, головна ідея якого полягає в тому, що лише комплексне використання символьних та нейронних моделей допоможе досягти повноцінного спектру обчислювальних та когнітивних можливостей. Наприклад, нейронні мережі можуть генерувати експертні правила міркувань, а за допомогою статистичного навчання можна сформувати правила, що породжують.

Тепер повернемося до тесту Алана Тьюринга.

Тест Тюрінга

Тест Тьюринга, як і згадали, призначений визначення потенціалу штучного інтелекту, близького до . Класичну інтерпретацію даного тесту можна так: людина взаємодіє з одним комп'ютером чи людиною. Спираючись на відповіді на певні питання, людина повинна визначити, хто є її співрозмовником: комп'ютер чи людина. А функції комп'ютерної програми входить введення людини в оману і підведення його до неправильного висновку. У процесі тесту ніхто з учасників не бачить одне одного.

Алан Т'юрінг говорив, що машину можна визнати мислячою, якщо вона зможе ввести в оману 30% учасників-людей у ​​процесі листування. І протягом десятків років реалізувати цей тест нікому не вдавалося, але у 2014 році видання The Independent повідомило, що комп'ютерна програма зуміла переконати людей у ​​тому, що вони обмінюються повідомленнями з тринадцятирічним хлопчиком. Це, власне, і означає, що за фактом тест Тьюринга був пройдений.

Цікаво, що комп'ютерну програму під назвою «Юджин Густман» створили саме російські програмісти, а сам тест був організований вченими з Університету Редінга в Лондоні в Королівському товаристві. У ході експерименту 33% учасників повірили, що спілкуються з реальною людиною. До речі, Юджин стверджував, що він тринадцятирічний хлопчик, який живе в Одесі.

Цей факт, безперечно, є величезним кроком у дослідженнях зі створення штучного інтелекту, проте вчені заявляють, що це досягнення може бути використане кіберзлочинцями.

«Юджин Густман» - це перша програма, що пройшла тест, хоча є також інші програми, близькі до подібного результату. Серед них можна назвати такі як JFRED, Elbot the Robot, Ultra Hal і Cleverbot.

За словами одного із засновників «Юджина» Володимира Веселова, основна ідея розробників полягала в тому, щоб «Юджин» знав все і одночасно нічого не знав, а на розробку програми з «справжньою» особистістю було витрачено величезну кількість часу. Професор з Університету Редінга Кевін Уорвік каже, що в галузі штучного інтелекту досі не було більш спірної та знакової події.

Ми ж у даному випадку не можемо не погодитися з фахівцями, адже сам факт того, що машина змогла переконати людей у ​​тому, що вона людина може перевернути всю світову комп'ютерну систему. Уявіть лише, які взагалі можуть бути наслідки, якщо кібернетичні співрозмовники, які мають штучний інтелект, зможуть вести живе листування з людьми, а спам-ботів стане неможливо розпізнати?

Висновок

Що ж можна сказати про ідею штучного інтелекту? З одного боку, вона справді приголомшлива, і якщо штучний інтелект буде створений, це дозволить всьому людству зробити величезний крок уперед у своєму розвитку. Але якщо подивитися на це з критичної точки зору, який усвідомлює штучний розум, якщо він потрапить до рук несумлінних людей, зможе завдати людині шкоди, що не піддається ніякому опису. Філософствувати на цю тему можна дуже і дуже довго, але ми не станемо цим займатися - нехай це стане їжею для вашого розуму.

Ми ж хочемо лише порадити вам займатися, і ставати розумнішими і освіченішими, адже за вас цього не зробить жодна машина.

Комп'ютерна програма переконала людей, що вона є 13-річним хлопчиком і тим стала першою програмою, що пройшла тест Тьюринга.

Т'юрінг створив тест для визначення того, чи може машина мислити.

Оригінальний тест полягає у наступному. Людина протягом 5 хвилин спілкується з одним комп'ютером та однією людиною . Отримуючи відповіді питання, людина має визначити, що розмовляє з людиною чи комп'ютерної програмою. Завданням комп'ютерної програми є ввести людину в оману, щоб той зробив помилковий вибір.

Учасники тесту не бачать один одного. Якщо суддя не може точно сказати, хто з співрозмовників людина, то вважається, що комп'ютер пройшов тест. Розмова ведеться в режимі "тільки текст", наприклад, за допомогою клавіатури та екрана (другорядного комп'ютера). Це необхідно, щоб протестувати саме інтелект машини, а не її можливість розпізнавати мовлення. Листування здійснюється через контрольовані проміжки часу, щоб суддя не міг робити висновків, виходячи зі швидкості відповідей (у наші дні комп'ютери реагують швидше за людину).

Для проходження тесту необхідно, щоб комп'ютерна програма змогла обдурити 30% людей.

Комп'ютерна програма «Євген Густман», створена командою розробників із Росії, пройшла тест, проведений у Королівському товаристві у Лондоні. Вона переконала 33 відсотки суддів у тому, що вона є 13-річним хлопчиком з Одеси, повідомили вчені з Університету Редінга, які організували цей тест.

«Наша головна ідея полягала в тому, що він може стверджувати, що чогось не знає, у його віці справді він може не знати якихось речей» - сказав Володимир Веселов, один із творців програми, - «Ми витратили багато часу на розробку правдоподібного персонажа.

Успіх програми, швидше за все, створить деякі побоювання щодо майбутнього комп'ютерів, сказав Кевін Уорвік, професор Університету Редінга та проректор з дослідницької роботи в університеті Ковентрі.

"У галузі штучного інтелекту немає більш знакових і суперечливих етапів, ніж тест Тьюринга, коли комп'ютер переконує достатню кількість суддів, у тому, що це не машина, а людина", - сказав він. «Маючи комп'ютер, який може обдурити людину, змусити її подумати, що хтось чи навіть щось є людиною, це є тривожним сигналом, пов'язаним із кіберзлочинністю. Тест Тьюринга є дуже важливим інструментом боротьби з цією загрозою. Важливо повністю зрозуміти, як спілкування в Інтернеті в реальному часі може ввести в оману людини, яка вважає істинність щось у той час, коли насправді це не так.

У тесті, організованому у Королівському товаристві у суботу, брало участь п'ять програм. Суддями були актор Robert Llewellyn, який грав робота Kryten у «Червоному карлику» (наукова комедія телеканалу BBC), та лорд Шаркі, який очолював кампанію, метою якої була посмертна реабілітація Алана Т'юрінга минулого року.

Алан Т'юрінг представив свій тест у 1950 у статті, «Обчислювальна техніка та розум». У ній він заявив, через те, що «мислення» важко визначити, чи важливо, чи зможе комп'ютер імітувати реальну людську істоту. З того часу він став одним із ключових елементів філософії штучного інтелекту.

Успіх прийшов на 60-річчя від дня смерті Т'юрінга, у суботу 07.06.2014 року.

Джерело: The Independent

P.S. Самостійно перевірити, наскільки розумна ця програма можна на сайті лабораторії штучного інтелекту Прінстонського університету. Особисто у мене не склалося враження, що я розмовляю з людиною, нехай навіть і з дитиною. Тож тест Тьюринга, мені здається, не зовсім ще пройдено.

Як ви оцінюєте цю публікацію?

Текст
Артем Лучко

Британський університет Редінга з великою помпою оголосив, що минула «важлива віха в історії обчислювальної техніки» і комп'ютер уперше пройшов коректно поставлений тест Тьюринга, ввівши в оману суддів, які повірили, що спілкуються з 13-річним українським хлопчиком. Look At Me розібрався в тому, що криється насправді за цією подією.

Що являв собою експеримент

Університет Редінга, фахівці якого провели перший успішний тест Тьюринга

Тестування чат-ботів було організовано Школою системної інженерії при університеті Редінга до 60-річчя смерті Алана Тьюринга. Експерти спілкувалися одночасно з живою людиною та з програмою, перебуваючи в різних кімнатах. Після закінчення тесту кожен із суддів має заявити, хто з двох його співрозмовників – людина, а хто – програма. Для чистоти експерименту було задіяно п'ять комп'ютерів та 30 суддів, кожен з яких провів серію з 10 письмових діалогів тривалістю по 5 хвилин. Хоча зазвичай у щорічному конкурсі програм штучного інтелекту на премію Лебнера ( в якому програми змагаються у проходженні тесту Т'юрінга за приз $2000)беруть участь всього 4 чат-боти та 4 особи. В результаті експерименту програма Eugene Goostman зуміла переконати 33% складу журі у своїй «людяності», що сталося вперше в історії. Роберт Луеллін, один із суддів, британський актор і аматор технологій сказав:

Тест Тюрінга був дивовижним. Відбулися 10 сеансів по 5 хвилин, 2 екрани, 1 людина та 1 машина. Я вгадав правильно лише 4 рази. Цей робот виявився розумним...

Чат-бот Eugene Goostman був розроблений вихідцем з Росії Володимиром Веселовим (зараз він проживає в США)та українцем Євгеном Демченком, який живе в Росії. Перша версія з'явилася ще 2001 року. Вік підлітка був обраний невипадково: у 13 років дитина вже багато знає, але не все, що ускладнює завдання суддів. У 2012 році чат-бот вже підібрався досить близько до успіху: тоді в «людяність» українського школяра повірили 29% суддів. У ході останніх доопрацювань програмістам вдалося підготувати віртуального співрозмовника до всіх можливих питань і навіть навчити його підбирати приклади відповідей у ​​«Твіттері».

Що таке тест Тьюринга,
і в чому його недоліки

Алан Т'юрінг у віці 16 років

Тест Тюрінга був вперше запропонований британським математиком Аланом Тюрінгом у статті «Обчислювальна техніка та інтелект», опублікованій у журналі Mind у 1950 році. У ній учений поставив просте запитання: «Чи може машина мислити». У своїй простій формі тест полягає в наступному: людина взаємодіє з одним комп'ютером і однією людиною. На підставі відповіді на запитання він повинен визначити, з ким він розмовляє: з людиною чи комп'ютерною програмою. Завдання комп'ютерної програми - ввести людину в оману, змусивши зробити неправильний вибір. Тест має на увазі п'ятихвилинний текстовий діалог, в ході якого мінімум 30% суддів повинні повірити, що вони мають справу з людиною, а не машиною. При цьому, очевидно, всі учасники тесту не бачать один одного.

Джон Серл, американський філософ

Є багато різних версій цього випробування (у деяких варіаціях суддя знає, що одним із співрозмовників є комп'ютер, в інших - не знає про це),але багато вчених і філософів критикують його до цього дня. Свого часу американський філософ Джон Серл кинув тесту виклик своїм уявним експериментом, відомим як «Китайська кімната». Він дозволив собі припустити, що здатність комп'ютера вести розмову і переконливо відповідати на питання - далеко не те саме, що мати розум і мислити, як людина. "Припустимо, що мене замкнули в кімнаті і [...] що я не знаю жодного китайського слова, ні письмово, ні усно", - пише Серл у 1980 році. Він уявив, що отримував питання, написані китайською мовою через щілину у стіні. Він не міг прочитати ці символи, але мав набір інструкцій англійською, які дозволяли йому реагувати на «один набір формальних символів іншим набором формальних символів». Таким чином, Серл теоретично зміг би відповідати на питання, просто дотримуючись правил англійської та обираючи правильні китайські ієрогліфи. І його співрозмовники були б переконані, що він може говорити китайською.

Більшість критиків тесту Т'юрінга як способу оцінки штучного інтелекту дотримуються аналогічної думки. Вони стверджують, що комп'ютери можуть використовувати тільки набори правил і величезні бази даних, запрограмованих для відповідей на питання, щоб тільки здаватися розумними.

Як програма обдурила журі

Професор університету Редінга Кевін Уорвік

Eugene Goostman має два фактори, які допомогли йому пройти тест. По-перше, граматичні та стилістичні помилки, які допускає машина у наслідування письма підлітка, а по-друге, відсутність знань про специфічні культурні та історичні факти, які також можуть бути списані на вік школяра.

У процесі розробки штучного інтелекту немає знакового і суперечливого етапу, ніж проходження тесту Тьюринга

«Успіх програми, швидше за все, пробудить деякі побоювання щодо майбутнього інформаційних технологій, - заявив професор університету Редінга Кевін Уорвік. - У процесі розробки штучного інтелекту немає знакового і суперечливішого етапу, ніж проходження тесту Тьюринга, коли комп'ютер переконує достатню кількість суддів вважати, що з ними спілкується не машина, а людина. Саме існування комп'ютера, який може обдурити людину, змусивши її думати, що вона - це людина, є тривожним сигналом, пов'язаним із кіберзлочинністю». Тест Т'юрінга до цього дня є важливим інструментом у боротьбі з цією загрозою. І тепер спеціалісти мають більш повно розібратися, як поява подібних просунутих чат-ботів може вплинути на онлайн-спілкування в інтернеті.

Судячи з логів, які можна знайти в Мережі (випробувати бот самостійно поки не виходить, ймовірно, через ажіотаж сайт не витримав трафіку і «упав»),чат-бот досить-таки примітивний і, як здається на перший погляд, не відрізняється від схожих розробок, які можна знайти в інтернеті. Один із цікавих діалогів із «Євгеном» представив журналіст Леонід Бершидський, який ставив йому незручні питання про гучну подію, яка не могла пройти повз юного одесита.

Навіть з огляду на опрацьований характер і біографію, помилки та друкарські помилки, які може допускати реальний підліток, переконливість бота викликає сумніви. По суті, він також реагує на ключові слова, а коли його ставлять у глухий кут, він видає заздалегідь заготовлені і не найоригінальніші відповіді-заглушки. Якби програма мала можливість використовувати пошукові системи, щоб перебувати в контексті поточної ситуації у світі, ми могли б бачити набагато вражаючий результат. Мабуть, на це потрібен час. Раніше відомий футуролог Реймонд Курцвейл, який обіймає посаду технічного директора Google, заявляв, що комп'ютери зможуть з легкістю проходити тест Т'юрінга до 2029 року. За його припущеннями, до цього часу вони зможуть освоїти людську мову та перевершити інтелект людей.

7 суперкомп'ютерів, здатних обхитрити людину

ELIZA

Тест Тьюринга - емпіричний тест, ідея якого було запропоновано Аланом Тьюрингом у статті «Обчислювальні машини та розум» (англ. Computing Machinery and Intelligence), опублікованій 1950 року у філософському журналі «Mind». Т'юрінг став метою визначити, чи може машина мислити.

Стандартна інтерпретація цього тесту звучить так:

«Людина взаємодіє з одним комп'ютером та однією людиною. На підставі відповіді на запитання він повинен визначити, з ким він розмовляє: з людиною чи комп'ютерною програмою. Завдання комп'ютерної програми - ввести людину в оману, змусивши зробити невірний вибір.

Усі учасники тесту не бачать один одного. Якщо суддя не може сказати, хто з співрозмовників є людиною, то вважається, що машина пройшла тест. Щоб протестувати саме інтелект машини, а не її можливість розпізнавати мовлення, розмова ведеться в режимі «тільки текст», наприклад, за допомогою клавіатури та екрана (комп'ютера-посередника). Листування повинне проводитися через контрольовані проміжки часу, щоб суддя не міг робити висновків, виходячи зі швидкості відповідей. За часів Тьюринга комп'ютери реагували повільніше за людину. Зараз це правило необхідно, тому що вони реагують набагато швидше, ніж людина.

Станом на 2009 рік жодна з існуючих комп'ютерних систем не наблизилася до тестування.

Комп'ютерна програма, що імітує психотерапевта

З книги Роджера Пенроуза "Новий розум короля"

…Найбільш співзвучна тесту Тьюринга комп'ютерна програма, розроблена К. М. Колбі в середині 1960-х років, яка імітує психотерапевта - настільки успішно, що деякі пацієнти виявили готовність віддати їй перевагу перед терапевтом-людиною та розповісти про себе більше, ніж при спілкуванні з живий лікар. Як приклад такого спілкування між комп'ютерним «психотерапевтом» та пацієнтом наведемо наступний уривок з діалогу (який вівся за допомогою телетайпу):

Терапевт: Чим я можу вам допомогти?

Пацієнт: Я не знаю.

Терапевт: Спробуйте розповісти щось про це.

Пацієнт: Ні.

Терапевт: Чи можна дізнатися причину?

Пацієнт: Я сьогодні втомився і неважливо почуваюся.

Терапевт: Чому? Є у вас із цього приводу якісь припущення?

Пацієнт: Так… Я старий.

Терапевт: Будь ласка, продовжуйте.

Пацієнт: Мені здається, що я втратив інтерес до всього, що відбувається.

Терапевт: Розкажіть мені докладніше про ваші відчуття.

Пацієнт: У мене є деякі міркування з цього приводу.

Терапевт: У вас є міркування.

Пацієнт: Я думаю, що мені бракує сім'ї.

Терапевт: Що змушує вас переживати через те, що вам бракує сім'ї?

Пацієнт: У цьому є якийсь виклик.

Терапевт: Чому це важливо для вас?

Хоча цей діалог може викликати дивне відчуття розуміння проблеми пацієнта комп'ютером, нічого подібного насправді немає: комп'ютер просто дотримується досить простих механічних правил. (Є також і «зворотна» ситуація, реалізована в системі, де комп'ютер, що імітує людини, яка страждає на шизофренію, дає хрестоматійні відповіді і симулює відповідні симптоми, здатні обдурити деяких студентів-медиків і змусити їх повірити в те, що з ними розмовляє справжній живий пацієнт! )