Google объявила о разработке мультимодальной нейросети под названием MUM (Multitask Unified Model). Она призвана улучшить результаты выдачи органического поиска и остальные продукты компании. Искусственный интеллект обучен работать на 75 языках и может совмещать информацию из них всех. Это упростит получение нужного результата для пользователей, сообщается в блоге разработчиков.
Создатели уточнили, что MUM работает на архитектуре глубоких нейронных сетей Transformer. В отличие от проекта BERT, новинка в 1000 раз мощнее. Благодаря своей мультимодальности, MUM может сформировать более обширное понимание окружающего мира. Она умеет не только понимать текст и картинки, но аудио- и видеофайлы.
Например, при запросе «Поход на гору Фудзияма», MUM предоставит информацию о наиболее комфортных маршрутах. Кроме этого, поиск может понять, что в контексте пеших прогулок пользователю может потребоваться специальное снаряжение, и предложит его. Из-за более глубокого знания окружающего мира, нейросеть может учитывать погоду. Например, осенью на горе начинается сезон дождей, поэтому ИИ может предложить купить непромокаемую куртку. Также можно будет сфотографировать какой-то предмет и спросить поисковик, подойдёт ли он для поставленной цели.
Сроки запуска MUM пока не уточняются. По словам разработчиков, они только начали тестирование нейросети. Несмотря на это, они планируют начать её интеграцию в ближайшие месяцы.