Продолжаю разгребать фотографии и картины, использованных в ай-трекинговых исследованиях за последнее время. В начале статьи – работа известного фотографа Вермера Бокельберга (Wermer Bokelberg), снятая в 1968 году.
А ниже – результат ай-трекингового исследования, тепловые карты по результатам просмотра 15 людьми (10 мужчин, 5 женщин). Фото показывалось в течение 5 секунд, свободный просмотр. Карты отличаются немного из-за примененных фильтров.

Может ли такая карта движений глаз показать нечто, что объяснит, почему эта фотография так хороша (если она хороша)?
Допустим, женская попа – физиологически привлекательный для взгляда объект, который, как магнит, притягивает взор, и она, к тому же, оказывается в центре композиции. Казалось бы, очевидно, что люди будут смотреть именно туда, куда они смотрели, но это известная ошибка мышления, когда мы прекрасно объясняем ситуацию после того, как все случилось.

Центральный объект вообще всегда притягивает внимание. Мы это видели на примере в статьях Какая попа лучше и Взгляд в центр.
Обратим внимание на карту саккад, быстрых движений глаз, отфильтрованную, чтобы показать суть. Это, что называется, весьма хороший паттерн просмотра – все внимание привлечено на главный объект, ничего лишнего. Может быть, это ответ – простота просмотра и понимания?

Но обратимся к более простому примеру, из другого исследования, 15 человек (все женщины), также 5 секунд свободного просмотра:

Вообще красота, прекрасное творение природы, симметрия, простота и сложность одновременно, наполненность символизмом, даже у людей, никогда не имевших интимной близости с растением.
Карта саккад тоже показывает гармонию:

А тут вообще инфернальная красота — применение разных фильтров:

Итак, что мы из этого можем извлечь: вероятно, одиночные объекты в центре композиции будут восприниматься предсказуемо. Это стоит проверить еще с несколькими объектами, в дальнейших исследованиях. Ни паттерн просмотра, ни тепловая карта, впрочем, не скажут о эстетических свойствах объекта и работы, на которой объект запечатлен. Надо менять дизайн исследования и уходить глубже в статистику, то есть подсчитывать различия в фиксациях, длине саккад и тому подобному.

Все материалы по теме изучения искусства с помощью ай-трекинга в этом блоге здесь.

Выше – фотография Ильи Питалева: Торжественное собрание участников Народной армии КНДР на стадионе имени Ким Ир Сена в честь 100-летия со дня рождения Ким Ир Сена, в Пхеньяне, в апреле 2012 года. Фотография вошла в шортлист 2013 Sony World Photography Awards. Действительно запоминающаяся, драматичная работа. По клику открывается в полный размер.

Фотография была показана на прошлой неделе 20 участниками исследования, (17 женщин, 3 мужчин), средний возраст 30 лет, на 24 дюймовом мониторе, в хорошем разрешении, в свободном просмотре в течение 5 секунд. Показ был осуществлен в рамках продолжающегося исследования картин и фотографий Как мы смотрим на картины. Эта фотография привлекла внимание своей необычностью — например, отсутствием центрального персонажа, и двумя разными по цветам массивами людей.

Есть идеи, что привлечет ваше (и 20 людей) внимание больше всего, прежде чем вы продолжите читать дальше? Хороший шанс проверить свою интуицию, между прочим :)

Лица людей – реальное пиршество для глаз социального животного, человека. Тут их много, и есть куда посмотреть. Логично было бы предположить массивное сравнивание двух когорт людей – военных и гражданских. Логично было бы увидеть и однородное мимолетное разглядывание большинства лиц.

Посмотрим на тепловую карту. Тепловая карта внимания представляет из себя пространственное распределение фиксаций взглядов. Алгоритм рассчитывает гауссово распределение всех фиксаций в соответствии с их длительностью, значением и нормализует амплитуду. Затем эти расчеты применяют ландшафт распределения к визуальному образцу, используя градиенты цвета. Строго говоря, такая карта показывает куда смотрели респонденты, но не объясняет, почему они туда смотрели. Карты представляют визуальное, простое, и интуитивное представление большого объема данных и важны для первоначального осмотра результатов, и определить основные регионы интереса.
Ниже несколько видов тепловых карт:
Почему молодая женщина с зеленым бантом в традиционной праздничной одежде (чосон-от, если не ошибаюсь) привлекла так много внимания?

Фиксации(желтые точки) и саккады, быстрые движения глаз от одного объекта к другому (желтые линии):
Число фиксаций взглядов:

Как видите, в среднем каждый участник смотрел на девушку два раза.

Да кто ж она такая и почему все её увидели и разглядывали?!
Может быть её лицо выглядит как-то необычно или это уже придумывание причин, и мне это кажется?

Кстати, как быстро вы найдете вы женщину в тёмно-синей одежде? Это еще раз напоминает о том, что если вы женщина и хотите быть привлекательной (для глаза), одевайтесь ярче. Кроме того, быть на периферии снимка в буквальном смысле мешает быть в центре внимания!

Есть тенденция замечать известного или любимого человека в толпе очень быстро, особенно в ситуациях, когда мы ожидаем или хотим это увидеть. Но здесь явно не такая ситуация. Есть тенденция замечать необычное и была бы девушка голой или в костюме клоуна, вопросов  бы не было.

Мое мнение такое: сочетание яркого зеленого банта с розовым цветом платья, в окружении менее яркого фона, молодость, и близость к центру картинки сделали девушку самой привлекательной частью работы. Другая возможность: бант на груди девушки похож на голову кролика (!), а мы склонны замечать животных очень быстро (Когда последний раз вы видели пантеру?). Наконец, еще вариант – это просто артефакт.

Есть у кого-нибудь идеи объяснения или гипотезы, которые можно было бы проверить? Например, фотошопом поменять эту женщину на другую и посмотреть, как изменится просмотр, или что-то подобное? Изучение визуального искусства – дело трудоемкое, но увлекательное.

P.S. Я надеюсь, в Северной Корее мой блог не читают, но на всякий случай хотелось, чтобы женщину после этой статьи не только не расстреляли, а сделали бы ответственным работником индустрии моды этой суровой страны :)

После нескольких пилотных экспериментов мы решили начать большое исследование картин, знаменитых и неизвестных, старинных и современных, разных стилей и жанров, с множеством гипотез.

Ниже – картина Диего Веласкеса Las Meninas. Одно из изображений – оригинал, другое – с изменением. Обе картины участвовали в пилотном исследовании в прошлом году, где показывались в течение 5 секунд, наряду с другими изображениями. Las Meninas была выбрана мной потому, что она участвовала в аналогичном эксперименте, показанном в фильме BBC What Makes a Masterpiece.

Хотелось выяснить, будет и разница, и в чем именно она будет заключаться, в просмотре оригинала и модифицированной картины, в которой один важный элемент сцены был изменен. Вот что получилось после просмотра 30 людьми:

Как вы видите, есть различия, но предстоит еще внимательнее изучить, в чем именно они заключаются: картина не простая, сами понимаете.

Методология была доработана и первая часть исследований началась 24 мая, продлилась три дня, и уже есть любопытные результаты. Как всегда, появляются совершенно неожиданные находки, никак не связанные с главной темой. Так, например, по результатам просмотра, появилась идея и гипотеза, что атеисты и верующие смотрят на картину Иванова Явление Христа народу несколько по-разному. Во всяком случае, показалось, что атеисты уделяют гораздо меньше внимания этому персонажу, но поскольку целей изучить такое не ставилось, гипотеза осталась в подвешенном состоянии.

Начнем готовить следующую часть для тестирования, и если у кого-то есть идеи по поводу включения каких-то картин — пишите, места для прекрасного есть всегда!

Первая часть здесь. В ней я обещал продолжить изучение фотографии с тремя девушками. Я перевернул фотографию по горизонтали, чтобы понять, будет ли разница в зрительном внимании.

Очевидно, что девушка в центре привлекает больше внимания, в обоих случаях. Это известный эффект центральности взгляда (Взгляд в центр).

Вверху – суммарная длительность фиксаций и процентное отношение переходов от одной области интереса к другой (во втором случае сумма больше из-за большего количества участников). В обоих случаях центральная девушка получает огромное, более чем в 2 раза, преимущество в длительности фиксаций. Это связано и с относительно большей площадью, занимаемой ею на фотографии, в сравнении с боковыми девушками.

Ниже – средняя длительность фиксаций:

Как видим, отношение между девушками в обоих случаях, в общем-то, одинаковое. Но мне непонятно, почему средняя продолжительность фиксаций во втором исследовании была существенно ниже, чем в первом. Длительность экспозиции фотографий была одинаковая, 5 секунд. В первом исследовании средний возраст участников был 32,2 года, во втором – 28,7. Соотношение мужчин и женщин было одинаковым. Снижение числа участников во втором исследовании до числа участников в первом не приводило к существенным изменениям в этом показателе. Использовался один и тот же ай-трекер. Вот только размер диагонали монитора и разрешение экрана было не одинаковым. Это одна из возможных причин. Другая предположительная гипотеза – поворот моделей в другую сторону может иметь эстетические последствия. На тепловых картах видно, как зоны интенсивного зрительного внимания следуют изгибам тел девушек.

Ниже: фотографии поделены на сектора, каждый с указанием среднего времени фиксации.

На картинке ниже: фотографии поделены на сектора, черным закрашены зоны, которые не получили ни одной фиксации. Фотография со второго исследования перевернута, для удобства просмотра.

Во втором случае люди видели больше центральной и верхней части фотографии, чем в первой.  Площадь покрытия взглядами в первом случае 42,6%, во втором – 64,7%. Люди больше видели за счет меньшего времени фиксации. О чем это говорит, и каким образом это может быть связано с изменением восприятия? Не задействован ли здесь какой-нибудь принцип, вроде того, что работает при просмотре диаграмм? (Лучшее понимание диаграмм). Там было показано, что диаграмма с хвостом вниз понимается лучше. Если вы обратили внимание, люди значительно дольше смотрят собственно не на попу (что есть попа?), а на область копчика, который был когда-то хвостом. Тогда, по аналогии, девушка с повернутой попой направо, дает нам легкость в просмотре: наши глаза двигаются слева вниз направо. Чем легче нам смотреть, тем легче понимать, и тем больше нам это нравится.

Таким образом, можно выдвинуть гипотезу, что нам чуть больше понравятся девушки справа на фотографиях внизу: