Как патенты 2011 года помогут Facebook спасти видео в Instagram Статьи редакции

Компания Facebook зарегистрировала несколько патентов по созданию фотографий из кадров видеозаписей, распознаванию лиц и достопримечательностей, а также анализу голоса. Колумнист TechCrunch считает, что эти технологии будут использованы в Instagram, чтобы автоматизировать создание обложек для 15-секундных роликов.

Появление видео в Instagram для многих преданных пользователей стало неожиданностью и шоком. Фотоприложение перестало быть только про фото, и появление двух типов контента серьёзно изменило подход к просматриванию ленты. Ленту, состоящую из одних лишь фотографий, можно листать очень быстро: на каждый пост тратится около секунды, чтобы понять, интересный ли контент и стоит ли на нём остановиться.

Посты с видео имеют «неприятную» особенность: длина ролика может составлять до 15 секунд, и вниманием управляет не сам зритель, а режиссёр. Каждый раз, решив посмотреть видео в Instagram, приходится класть руку на сердце и надеяться, что оно стоит потраченного времени. Сделать нелёгкий выбор в пользу просмотра ролика помогают только три вещи: авторитет его автора, текстовая подпись и фотообложка — выбранный режиссёром стоп-кадр, который, по идее, должен лучше всего отражать его суть.

В отличие от фотографий, процесс создания роликов в Instagram устроен таким образом, что выбор обложки занимает ещё один дополнительный шаг. Многие пользователи либо пропускают его, либо выбирают стоп-кадр безответственно и в суете. В итоге ленты по всему миру наполняются видео с совершенно непривлекательными обложками. Instagram теряет в эстетике, а его пользователи раздражаются и реже просматривают видео.

Похоже, у владеющей Инстаграмом компании Facebook есть решение этой проблемы. Как пишет колумнист TechCrunch Джош Констайн, её сотрудники получили несколько патентов на целую серию похожих разработок. Заявки были поданы ещё аж в 2011 году, но получены только в апреле-мае 2013 года, а их предназначение стало ясно только после появления видео в Instagram.

Речь идёт о трёх патентах: «Автоматическое получение фото на основе распознавания лиц и социальных компонентов», «Предпочтительные изображения из последовательности видео» и «Выбор изображения из последовательности видео на основе социальных компонентов». Если разобраться, то непонятные названия и пространные описания превращаются во вполне осязаемые и необходимые функции.

Когда была запущена функция отмечания друзей на фотографиях, в Instagram тонко намекнули, что можно отмечать не только людей, но и бренды, компании и продукты, имеющие аккаунты внутри сервиса. Теперь этот процесс могут автоматизировать.

Процесс создания изображений может анализировать кадры из видео, чтобы идентифицировать… место (например, Эйфелеву башню, мост Золотые Ворота, Голливуд), компанию или организацию (кофейню, бейсбольную команду), бренд или продукт (Кока-Колу, Луи Виттон).

Instagram сможет определить, что находится на видео или фото, и помочь с указанием тега или отметкой местоположения. Хотя на данный момент Instagram работает прозрачно — пользователь видит всё, на что он подписан — такие технологии могут использоваться в ленте Facebook. Например, фото и видео достопримечательностей могут быть показаны тем, кто находится поблизости, а у некоторых постов будет больший приоритет, если там отмечены друзья пользователя.

Эта же технология может быть использована, чтобы предложить лучшие стоп-кадры для обложек видео в Instagram. Если приложение определит кадр с Пизанской башней, оно предложит поместить его на обложку. Также поступят и с фото людей: в приоритете окажутся те моменты, где все участники снимка улыбаются. Кроме того, приложение сможет определить идеальные уровень контраста и освещения, а встроенный стабилизатор выберет наименее смазанный кадр.

В патентах описывается даже прослушка голоса: фразы участников ролика могут указывать на самый интересный момент в видео.

Процесс выбора изображения может анализировать контент голосовых сегментов (например, использую алгоритм распознавания речи) для указания важности («Скажите “чиз”!», «Чи-и-и-из!», «Так красиво!», «Круто!»).

Вероятно, и PRISM был бы не так уж плох, если бы собранную информацию использовали не для шпионажа, а для улучшения фотографий в Instagram.

Говорите членораздельнее, вас прослушивают,
Никита Лихачёв,
TJournal