«Один мужчина, борода»: во время сбоя Инстаграма и Фейсбука пользователи увидели точные текстовые описания своих фото Статьи редакции

Для многих стало открытием, что искусственный интеллект соцсетей «видит» каждый пост и делает это довольно точно.

3 июля в работе Фейсбука, Инстаграма и WhatsApp произошёл крупный сбой — пользователи на протяжении нескольких часов не могли зайти в приложения и получить доступ к новостным лентам. Также все три сервиса (WhatsApp и Instagram принадлежат Facebook) не открывали изображения и аватарки.

Из-за сбоя пользователи могли наблюдать в Фейсбуке и веб-версии Инстаграма необычную картину — вместо фото появились довольно точные текстовые описания. К примеру, снимок девушки с собакой так и обозначался набором тегов: «На этом изображении может находиться девушка и собака».

Пользователи стали делиться в Твиттере пересказами собственных страниц. На это обратили внимание и читатели TJ.

Big Data в инстаграме случайно приоткрыла мне свой зловещий оскал https://t.co/SQGsIVVUey
Инстаграм решил не загружать мне мои же фотографии, а просто их описать https://t.co/Y57SmkNCQt
зачем вам фотографии когда у вас есть описание фотографий
(с)великий инстаграм https://t.co/daIPAEfQ09
Спасибо, ФБ, но, может, картинка все-таки лучше? https://t.co/T90VpwzEH9
Пока инстаграм лагает, он показал теги фотографий, которые он сам присваивает. И тут за нами следят, ну куда же деться от вас #instagramdown https://t.co/JXGaC9WORZ

В соцсетях шутили, что Инстаграм и Фейсбук развивают воображение, а также, что именно так будут работать сервисы при автономном рунете.

У меня теперь текстовый инстаграм, который помогает развивать воображение. https://t.co/RFnpP0wSTf
Так будет выглядеть Инстаграм. когда его заблокирует РКН https://t.co/7K4ADeYhmd
Альт-текст для изображений на фейсбуке выглядит почти как описание товаров с AliExpress. https://t.co/x9vCXy1t0N
Следите за нами в нашем красочном инстаграме: http://instagram.com/aviasales/ https://t.co/BUv0KETln7

Что это за теги вместо фото

Издание The Verge объясняет: если вкратце, то набор тегов — то, как каждую фотографию каждого пользователя видит искусственный интеллект, встроенный в Инстаграм и Фейсбук. Системы машинного зрения анализируют каждый снимок, разбивая его на объекты. В некоторых случаях алгоритмы Фейсбука могут даже точно определить, какой именно пользователь изображён на фото.

Facebook использует систему «чтения» изображений в своих сервисах как минимум с 2016 года. В 2018 году Instagram запустил функцию пересказа содержимого фотографий для слабовидящих — по сути зачитывается набор тегов.

Для тех, кто погружён в сферу технологий, подобные текстовые описания в соцсетях не являются чем-то новым. Программисты даже делали расширения для Chrome, раскрывающие наборы тегов. Но крупный сбой Фейсбука и Инстаграма показал обычно «невидимую» часть работы нейросетей широкому кругу людей.

На фоне скандалов с Facebook и приватностью СМИ и пользователи задались вопросом, для чего в соцсетях могут собирать подобный тип данных. В The Verge предположили, что информацию могут передавать рекламодателям. Журналисты обратились за комментарием в Facebook, но не получили ответа.

При этом редакция издания отметила: «Независимо от того, как используют данные, это увлекательный взгляд за кулисы крупнейшей в мире операции по сбору данных».

Несколько примеров для сравнения

Oh yeah! I forgot Facebook uses machine learning to tag our photos with what it sees in the picture.

To be fair, "one person, beard" is pretty much a spot-on description of me. https://t.co/fCpydUxtpz
Редактор TechCrunch пошутил: «Один мужчина, борода — довольно безошибочное описание меня»
Аватарка редактора TechCrunch, которую описывал алгоритм
FB's broken AI photo recognition tool left one person out. It's either me or Judas https://t.co/L7bB4uC7tZ
«Распознавание снимков от Facebook пропустило одного человека. Это либо я, ибо Иуда»
Спокуха, инстаграм просто тестит новую шпионскую прогу, отсюда и глюки! Посмотреть пока фото нельзя, а вот прочесть можно🤦 https://t.co/BpnVm1duwi
самое время подписываться на мой инстаграм, раз он сам подогнал описание: https://www.instagram.com/olegnikishkin/ https://t.co/41omaCj4UR
Вчерашний сбой в Инстаграме показал, что местная нейросеть работает в целом неплохо. https://t.co/OiDf2Jeqij
{ "author_name": "Женя Кузьмин", "author_type": "editor", "tags": ["\u0441\u043e\u0446\u0441\u0435\u0442\u0438","\u043d\u0435\u0439\u0440\u043e\u0441\u0435\u0442\u0438","instagram","facebook"], "comments": 37, "likes": 49, "favorites": 16, "is_advertisement": false, "subsite_label": "internet", "id": 104918, "is_wide": false, "is_ugc": false, "date": "Thu, 04 Jul 2019 14:45:54 +0300", "is_special": false }
0
37 комментариев
Популярные
По порядку
Написать комментарий...

Фантастический крюк

41

Вы: расставляете красиво булочку с маком и чашечку свежесваренного кофе, чтобы на фото красиво смотрелась вся эта композиция, выбираете цвета, фильтры, экспозицию, чтобы передать настроение
Нейросеть для слабовидящих: На данном изображении может находиться: еда

Ответить
9

Уже много месяцев это. Можно смотреть в коде элемента на сайте что инстаграм подумал о вашем фото, они это туда в схему заносят, видимо для SEO продвижения и для своих штук.

Ответить

Северный фонарь

byron
0

Ты читал статью, ало?

Ответить
0

Да

Ответить
4

Я бы от такой нейронки к подсайту "фото" не отказался. )

Ответить

Преподобный торшер

Пешка
7

>На данном изображении может находиться: Кенчанский

Ответить
5

Это и сейчас можно посмотреть в браузере к каждой фото

Ответить
3

Всем кому интересна тема преобразования картинок в текст, вот что нужно загуглить:
Yolo v3

Все намного проще, чем может показаться :)

Ответить

Здоровый кофе

Denis
0

а что у нас есть по распознаванию номеров машин?

Ответить
1

Тут все еще Open CV мне кажется все юзает в продакшене, но я не уверен, с нейронками точно сложнее будет

Ответить
–5

Комментарий удален по просьбе пользователя

Ответить

Достаточный единорожек88

Кенчанский
6

Идеально же: ты будешь туда постить свои охуенные истории, но приложение не будет работать и никто их не увидит. WIN WIN SITUATION!

Ответить
1

Комментарий удален по просьбе пользователя

Ответить
0

Ну кроме тегов для рекламы, детектирование объектов можно использовать как сервис для слепых.

Ответить
5

так это ж есть в тексте тоже(

Ответить
3

точно(

Ответить
3

Комментарий удален по просьбе пользователя

Ответить
5

Инстаграм для слепых это конечно мощно. Достаточно просто подписаться на тот сатирический аккаунт, где вместо фоток постят текстовое описание.

Ответить
1

Предлагаю еще тупее - вместо текста ставить точки системой Браиля. Вот умора будет.

Ответить
2

Бачок с бигдатой потик

Ответить
2

Ну это как бы alt-теги, которые по стандарту html должны быть заполнены у изображений, как раз для случаев, когда картинка не загрузилась или документ открывается скринридером

Ответить
0

Точнее alt-аттрибуты тега img

Ответить
2

Для обывателя, вообще, что то связанное с компьютером, кажется дичайшей магией.

Ответить
1

Блин, а где упоминание местного форса этого машинного описания обложки фб Лихачева?

Ответить
1

я вот помнил что-то такое, но не нашел

Ответить
0

Автор наверно удалился вместе с постом

Ответить
1

делает это довольно точно.

шутите чтоль? Посмотрел для некоторых фоток описание. Селфи из далека в холле он подписал "в помещении". Спасибо, кэп!

Ответить
1

Комментарий удален по просьбе пользователя

Ответить
1

Комментарий удален по просьбе пользователя

Ответить
1
Ответить
1

У AviaSales удивило описание фотки: "Чё-то про Мальту")

Ответить
0

Они вообще молодцы)

Ответить
0

Тот момент, когда на самом деле это теги под фото для слабовидящих, хех

Ответить

Неприятный ящик

0

сбор данных лол

Ответить
0

Фото на весь интернет - нормально. Текст описывающий то что изображено на фото - ах уж этот дрянной фейсбук!

Ответить
0

Разрабам инсты и фб самим стыдно за это говно, вот и прикрыли описаниями)

Ответить
0

Так даже лучше

Ответить
Обсуждаемое
Новости
Опрос: 64% россиян считают, что коронавирус создали искусственно как новую форму биологического оружия
По данным «Левада-центра», эта версия доминирует во всех возрастных группах, но наиболее популярна среди людей старшего поколения.
Новости
Экс-президента Франции Николя Саркози приговорили к году тюрьмы и двум условно по обвинению в коррупции
Его также признали виновным в торговле влиянием.
Наука
Зонд NASA для изучения Солнца сделал снимок Венеры, на который не рассчитывали учёные
На нём видна поверхность планеты, которую не запечатлеть в видимом спектре
Популярное за три дня
Интернет
В TikTok появились дипфейк-видео с Томом Крузом. Подделка настолько реалистичная, что её не замечают даже алгоритмы
Всего за четыре дня дипфейк-версия актёра собрала более 250 тысяч подписчиков.
Интернет
Извините, но президент в одном из других своих замков: расследование о «дворце Путина» в стиле игры про Марио
Поговорили с автором восьмибитной пародии «Супер Царио», где герой путешествует по поместью и встречает множество отсылок на видео Навального.
Новости
На ТНТ показали пародию на Владимира Соловьёва и Дмитрия Киселева, а потом удалили скетч на YouTube и в сервисе Premier
Создатели утверждают, что в шоу «Однажды в России» нет цензуры.

Комментарии

null