«Глазами» и «ушами» ИИ могут стать очки дополненной реальности Facebook.
Исследовательская группа Facebook в сфере искусственного интеллекта занимается новым проектом под названием Ego4D. Эта самообучаемая система, которая будет постоянно анализировать действия людей в реальном мире с помощью записанных видео от первого лица. По данным The Verge, ИИ будет развивать «эпизодическую память» (например, искать ответ на вопрос «где я оставил свои ключи?») и аудиовизуальную диаризацию. Последняя позволит делить входящий визуальный поток на нужные сегменты и определять, кто, что и когда сказал. Сейчас подобных навыков нет ни у одной системы ИИ.
Эксперты обеспокоены тем, как Facebook будет получать аудиовизуальную информацию. Уже сейчас есть подозрения в том, что компания скрытно записывает пользователей через камеры и микрофоны, встроенные в их первые очки дополненной реальности. Предполагается, что Facebook не только записывает, но и анализирует, расшифровывает и использует эту информацию. Подозрения обоснованы, поскольку компания часто появляется в эпицентрах различных скандалов, вызванных утечками персональных данных.
Facebook утверждает, что сбор данных производит не компания, а университеты, с которыми она сотрудничает. За время совместной работы с 13 учебными заведениями по всему миру было собрано около 3205 часов видеозаписи, предоставленных 855 участниками из девяти стран. Добровольцы носили камеры GoPro и AR-очки, чтобы записывать свои повседневные действия: от работы на стройке до ведения хозяйства, игр с домашними животными или общения с друзьями. В процессе обработки университеты размывали лица людей и удаляли любую личную информацию.
Вторым этапом работы будет обучение искусственного интеллекта ответам на конкретные вопросы и решению определенных задач. А именно:
Эпизодическая память: что произошло (например, «Где я оставил свои ключи?»)?
Прогнозирование: что я буду делать дальше (например, «Подождите, вы уже добавили соль в этот рецепт»)?
Манипуляции руками и предметами: что я делаю (например, «Научи меня играть на барабанах»)?
Аудиовизуальный дневник: кто и когда что-либо сказал (например, «Что было главной темой во время урока?»)?
Социальное взаимодействие: кто с кем взаимодействует (например, «Помогите мне лучше услышать человека, говорящего со мной в этом шумном ресторане»)?
Компания надеется, что ее проект позволит вывести обучение ИИ на совершенно новый уровень. «Он перемещает нашу работу от необходимости анализировать груды фотографий и видео, снятых человеком с определенной целью, к этому плавному, непрерывному визуальному потоку от первого лица, который системы AR, роботы, должны понимать в контексте продолжающейся человеческой деятельности», — пояснила журналистам исследователь искусственного интеллекта Facebook Кристен Грауман.
И все же, несмотря на заверения компании в том, что она собирает обезличенные данные, в проекте Ego4D нет упоминания о защите конфиденциальности. Например, в задании «Аудиовизуальный дневник» никак не упоминается, что нужно будет удалить данные о людях, которые не хотят, чтобы их записывали.
На вопрос СМИ по этому поводу в Facebook ответили, что меры по защите конфиденциальности пропишут в проекте немного позднее.
Мы ожидаем, что по мере того, как компании будут использовать этот набор данных и эталонный тест для разработки коммерческих приложений, они будут разрабатывать меры безопасности для таких приложений. Например, прежде чем очки дополненной реальности смогут улучшить чей-то голос, может существовать протокол, которому они будут следовать, чтобы спрашивать разрешения у других очков. Или они могут ограничить радиус действия устройства, чтобы оно могло улавливать звуки только от людей с которыми я уже разговариваю или которые находятся в непосредственной близости от меня.
