Новая компьютерная модель умеет обрезать фото красиво

Обрезая изображение вручную, люди ориентируются на самую интересную или выразительную часть фотографии, даже если она смещена от центра, но существующие программные инструменты выполняют эту операцию чисто механически, оставляя центральный фрагмент.

Благодаря алгоритму, разработанному в Университете штата Пенсильвания (Penn State), компьютеры скоро научатся обрезать фотографию так, чтобы максимально подчеркивать её эстетическую привлекательность.

«Мы решили эту проблему, создав статистическую модель, которая быстро идентифицирует визуальную значимость каждой сегментированной части картинки и обрезает общую фотографию эстетически приятным способом», — рассказала профессор статистики Penn State, Цзя Ли (Jia Lee). Вместе с коллегой, профессором информатики и компьютерной техники, Джеймсом Вангом (James Wang), она недавно получила на эту модель патент США 10186040.

Внимание, уделяемое любому сегменту, зависит от его индивидуальных атрибутов, таких как цвет, текстура и яркость, а также от того, как он пространственно соотносится с другими частями картинки. Исследователи закодировали все эти различные типы информации в параметрах цепи Маркова. Далее, статистическая модель ранжировала все сегменты, причём наивысший рейтинг получал тот, на котором дольше удерживался взгляд.

Авторы сообщили, что обработка изображения 400×300 по этому алгоритму на обычном настольном ПК или ноутбуке занимает всего около 50 мс. «Таким образом, наш метод подходит для устройств с ограниченными ресурсами памяти и процессора» — отметил Ванг.

Новый алгоритм может найти применение в смартфонах, в соцсетях и веб-браузерах, где до сих пор изображения обрезаются к центру. Разработчики надеются, что он также заинтересует поисковые компании и рекламодателей, как способ дополнительного улучшения кликабельности рекламных баннеров.