Недавно был в гостях и увидел эту свою картину, написанную еще в 1987 году. Она называется Исцеление (79х138 см, масло, холст). Написал я ее именно как средство против лихорадки. Механизм исцеляющего влияния основывался на влиянии красного цвета, форме и распределении этих округлых объектов на ножках. Когда картина была у меня, и потом, по сообщениям, она трудилась и исцеляла на славу.  Смотрел на нее и думал, как интересно ее увидеть после стольких лет, как раз во время пандемии коронавируса. Она, в этом нет никаких сомнений, может работать и против него.

Сейчас я знаю куда больше, чем тогда, о том, как это все может работать, менять наше состояние, и влиять на наш организм: помимо всего прочего, я, как-никак, несколько лет исследовал картины и фотографии с помощью ай-трекера. 

И родилась у меня идея написать несколько картин, которые будут производить определенные психологические эффекты. Поскольку эта картина не у меня, то первой напишу как раз картину для укрепления здоровья, против коронаматьеговируса.

Небольшое исследование по рассматриванию трех фигур – женской, человекообразного робота, и не особо человекообразного робота, с использованием ай-трекера, провели немецкие психологи из Университета Дуйсбурга — Эссена.

Авторы говорят, что исследование показывает, что «гетеросексуальные мужчины не переносят эволюционные психологические перцептивные механизмы выбора партнера на роботов». Иными словами, мужчины отличают женщин, сделанных из плоти и крови, от женщин, сделанных из металла и киберкожи, и сексуально относятся к ним по-разному. Это какой-то вымученный и неверный вывод, на мой взгляд.

Авторы сами пишут, что разницы во времени на рассматривание человеческой груди или груди робота не обнаружилось. Плюс странное рассматривание тазовой области – у человекоподобного робота больше, чем у женщины. Что там пытались рассмотреть мужчины?

Мне показалось, что исследование продемонстрировало, что андроид, максимально похожий на женщину с выдающимися половыми признаками, безусловно выдает такие же паттерны просмотра, как и у настоящей женщины.
Господи, да прилепи ты сиськи на что угодно, и мужчины будут смотреть на это, и это не просто банальный факт, но и загадка природы.

И, разумеется, в сфере секса зреет похожая на фаст-фуд революция: секс-роботы будут сверхдоступны и суперсексуальны, и мужчины, наконец-то, утолят свой голод (или, наоборот, только войдут во вкус).

Szczuka, J. M., & Krämer, N. C. (2019). There’s more to humanity than meets the eye: Differences in gaze behavior toward women and gynoid robots. Frontiers in Psychology, 10(693). doi: 10.3389/fpsyg.2019.00693

На выходных исследовали рекламные ролики, и использовали несколько методов, в том числе ай-трекинг. Помимо роликов, которые надо было исследовать, я взял два известных ролика в качестве образцов. Выбрал я их потому, что они заработали огромное число просмотров и «расшаривания» в YouTube. Кроме того, они просто классные и всегда вызывают неподдельные и чистые эмоции. Черт, да я посмотрел их за пару дней раз наверное 70, и каждый раз, каждый раз! они на меня действовали – заставляли улыбаться или умиляться, роняя слезинку.

Вот первый, реклама Budweiser для Super Bowl под названием Puppy Love:

Второй – реклама Volkswagen Passat под названием The Force:

Есть интересное видео, рассказывающее про то, как строится история про щенка:

Но, кроме таких и подобных описаний, есть ли что-то, что можно измерить? Ай-трекинг выдает приличное количество переменных: количество фиксаций, количество фиксаций в секунду, длительность фиксаций, отношение фиксаций к саккадам, скорость фиксаций, длина фиксаций, угловая скорость фиксаций, и прочее. Должна же найтись какая-то переменная, которая показала бы отличия гениального ролика от «обычного»?

Данные я обрабатывал, используя IBM Watson Analytics, что позволило легко находить связи и ассоциации, причем в замысловатых взаимодействий разных переменных. И хотя анализ еще далек от завершения, одну вещь уже удалось отловить. Ничего простого не обнаружилось: было бы, конечно, здорово найти, что средняя длительность фиксаций или длина саккад у хорошего ролика отличается от обычного, и это бы могло стать таким простым и суровым критерием оценки.

Найденная связь – скорость перемещения взгляда (path velocity) – длительность всех отрезков между последовательными фиксациями, разделенная на общее время в секундах, измеряемая в пикселях в секунду (px/s). Следует заметить, что значение скорости, конечно, связано с размером монитора, расстоянием между ним и глазами, частотой ай-трекера и проч. То есть это не универсальная какая-то скорость, по которой можно судить любые другие ролики.

Итак, именно в данном случае, если эта скорость ниже 469,85 пикселей в секунду, то с большой вероятностью – это Puppy Love от Budweiser. А если выше этой скорости – The Force. 29% точности может показаться незначительными, но вероятность случайного угадывания равна 10% (для каждого из 10 роликов), так что вероятность предсказания выше случайного в 3 раза.

Есть несколько возможных и применимых в данной ситуации объяснений: 1) скорость может быть обусловлена возбуждением или 2) с предсказуемостью ситуации (Holmqvist et al., 2011).

Физиологическое возбуждение — чем оно ниже, тем ниже скорость, и наоборот.

Предсказуемость ситуации: предвосхитительные саккады не так быстры, как реактивные – и в ситуации, когда сюжет предсказуем раз за разом, скорость может быть низкой, а когда сюжет меняется неожиданным образом, зрителю нужно реагировать быстро для восстановления понимания и восприятия ситуации.

На основе этих возможных объяснений можно сделать такие предварительные выводы – строить историю по классическим канонам, не стесняясь того, что могут назвать клише, и использовать проверенные «слезоточивые» методы. Такая история становится понятной, предсказуемой, но как видим, отнюдь не теряет своей прелести. Либо строить историю с неожиданными поворотами – ведь смотрите, как был ошеломлен мальчик (а вместе с ним и мы), когда после всех его попыток он смог покорить Силу и завести машину!

Holmqvist, K., Nyström, N., Andersson, R., Dewhurst, R., Jarodzka, H., & Van de Weijer, J. (Eds.) (2011). Eye tracking: a comprehensive guide to methods and measures, Oxford, UK: Oxford University Press.

Одна из лучших картин Левитана, «Март», 1895 года. Прошло более ста лет, но словно написана вчера. О ней много написано, но я решил посмотреть, может ли айт-трекинг привнести что-то еще.

20 человек рассматривали картину в высоком разрешении в течение 5 секунд, и вот что мы видим:

Тепловая карта внимания

Точки фиксации взглядов

Точки фиксации взглядов и саккады

Лошадь – один из главных элементов картины, но и скворечник, который, по мнению исследователей, висит как-то необычно высоко и на слишком тонкой ветке– весьма привлекает внимание. Вместе с лошадью, эти два элемента задают вертикальный паттерн просмотра. Это, наверное, и влияет на то, что исследователи отмечают в картине: что Левитан создал «движение» вверх, к весеннему небу. Неизвестно, был ли скворечник в реальности, или Левитан его придумал, но без него картина смотрелась бы по-другому.

В течение последних нескольких месяцев мне как-то удалось провести довольно много исследований, и перед тем как двинуться дальше, надо подводить итоги, и поделиться. Возможно, кое-что покажется вам таким же интересным, как и мне. Вот на что я тратил свое время:

• Изучение рекламных материалов и возможности создания лучших композиций.

• Исследование, как мы представляем свое желанное будущее, и как мы можем создать технологию «лучшего и правильного» представления, так, чтобы повысить вероятность его реализации.

• Возможности имплицитного обучения и разработки улучшенных методов такого обучения.

• Эксперимент по изменению пищевых предпочтений, используя когнитивные психологические методы (да, и при этом человек теряет вес).

• Исследование по когнитивным методам снижения симптомов псориаза.

Ну, начнем не по порядку, а по мере готовности:

Имплицитное обучение

Обучение сознательное, ориентированное на получение знаний, например, посредством лекций, исследований и дискуссий – это эксплицитное обучение. Вы знаете, чему учитесь и учите это, пока не освоите.

Имплицитное обучение – это процесс обретения знаний и умений, который происходит, в основном, без участия сознания или восприятия. Вы можете даже не знать, чему вы учитесь, или знать, но не понимать происходящее. Лучший пример и вид имплицитного обучения — игра. Можно сказать так: эксплицитное обучение – сбор информации, имплицитное – создание и организация интуитивного понимания.

В реальности, если обучение сбалансировано, то будет задействовано оба типа научения. Практически все, чему можно научиться, можно научиться имплицитным образом. Понятно, для разных видов деятельности нужны разные подходы.

Как это используют: в 1994 году Филип Келлман из Университета Калифорнии в Лос-Анджелесе и Мэри Кайзер из Исследовательского центра Эймза при НАСА (Kellman & Kaiser, 1994) тестировал один вид имплицитного обучения (перцептивное обучение) начинающих пилотов. Им показывали несколько приборов на панели, и они должны быстро определить одно из нескольких состояний самолета: поворот с набором высоты, устойчивое снижение, и тому подобное. Состояние можно сделать, проанализировав данные всех 6 приборов.

На картинке, из аналогичного исследования австралийских ученых (McLean, Wise, & Williams, 2011) показаны: левый поворот с набором высоты, и правый поворот со снижением.

Показ происходит быстро, и если нет ответа, на мониторе показывается следующий слайд. Если ответ правильный – одобрительный звук, если неправильный – неодобрительный звук и подсветка правильного ответа. Через три часа (две сессии по полтора часа каждая) таких тренировок у новичков выработалась способность быстро оценивать маневр самолета, с аккуратности и скоростью, которую демонстрируют пилоты с 500-2500 летными часами!

Сейчас похожие методы используют для обучения дерматологов (быстрая и точная диагностика высыпаний на коже), хирургов, химиков, кардиологов (чтение ЭКГ), разумеется, военных, и проч. Метод настолько хорошо, что вызывает и опасения – понимание автоматизируются быстро, и при недостаточно продуманном дизайне есть риск обрести вредные навыки.

Я решил посмотреть на самый простой способ, для того, чтобы понять, каким образом его можно совершенствовать и применять в других областях. Я взял ювелирные украшения, в которых ни черта не разбирался, и еще потому, что было можно достать много материала для обучения, и, создав набор колец из 200 колец с ценами, начал тренироваться. Задача была – догадаться, какое из них дороже. В конце концов, цена – хоть какое-то измерение ценности изделия.

Слева — результат моих 17 занятий – чуть больше часа. Через какое-то время возникает уверенность, и весьма скоро – понимание, почему надо выбрать именно это, а не то кольцо. Цвет, точность линий, и все такое. До конца не понятно сознательно, но подсознательно – уверенность хорошая. По моей просьбе три человека приняли участие в такой игре, с практически таким же результатом, и девушка, которая любит ювелирные изделия, через полчаса уверенно достигла 90 с лишним процентов точности.

Слева — другой вариант, который лениво тестируется сейчас: в этом случае надо определить, где какой бренд: Cartier, Chopard или Bvlgary, и другие известные бренды.

Что еще испытать, в такой же неведомой для меня области? Не придумав ничего лучше, я загрузил 350 картинок женской обуви, с той же задачей – как можно быстрее определить, какая пара обуви дороже.
Вот как выглядели слайды (фото с сайта net-a-porter.com):

Теперь, через час тренировок и полчаса эксплицитного просмотра а могу сказать, что мое представление о женской обуви изменилось. Мало того, что я стал обращать внимание на то, что носят женщины, я уверен, что отличу Jimmy Choo от Christian Louboutin или Miu Miu. Хотя, если я не буду поддерживать эти знания, то вскоре вернусь в первоначальное состояние «Джимми, чо?»

Такой подход, очевидно, применим для обучения новых работников или освоения новой профессии – вряд ли по скорости и глубине обучения что-то может соперничать с имплицитным подходом.

В общем и целом, как и полагается после исследования, образовалось еще больше вопросов для последующих экспериментов. Например: как это можно применить в одной очень специфической области, и как можно улучшить это метод в 2, 5 или даже 10 раз? Появились идеи, которые надо проверять.

Поскольку я учу китайский, и как оказалось, тональность мне достается сложнее всего, я начал изучать тональности именно таким образом. Диктор произносит слог, а на экране появляются несколько вариантов тонов, и надо выбрать правильный. Если сначала все кажется мне одинаково звучащим, то через минут 10, перепутать первый тон с третьим уже кажется невозможным. Сложно передать ощущения, но язык сраз