Logo ru.nowadaytechnol.com

Три новых многоязычных модуля USE переходят на TensorFlow

Оглавление:

Три новых многоязычных модуля USE переходят на TensorFlow
Три новых многоязычных модуля USE переходят на TensorFlow

Видео: Три новых многоязычных модуля USE переходят на TensorFlow

Видео: Три новых многоязычных модуля USE переходят на TensorFlow
Видео: Что такое Tensorflow? Архитектура Tensorflow. Сессия, граф вычислений, операция, переменная, тензор. 2024, Марш
Anonim
Image
Image

Google - один из пионеров исследований в области искусственного интеллекта, и множество их проектов вскружили голову. AlphaZero от Google DeepMind команда совершила прорыв в исследованиях искусственного интеллекта благодаря способности программы самостоятельно изучать сложные игры (без обучения и вмешательства человека). Google также проделал отличную работу в Программы обработки естественного языка (НЛП), что является одной из причин эффективности Google Assistant в понимании и обработке человеческой речи.

Google недавно объявил о выпуске трех новых ИСПОЛЬЗУЙТЕ многоязычные модули и предоставить больше многоязычных моделей для получения семантически похожего текста.

Первые два модуля предоставляют многоязычные модели для получения семантически похожего текста, один из которых оптимизирован для производительности поиска, а другой - для скорости и меньшего использования памяти. Третья модель специализируется на поиске вопросов-ответов на шестнадцати языках (USE-QA) и представляет собой совершенно новое приложение USE. Все три многоязычных модуля обучаются с использованием многозадачной структуры двойного кодировщика, аналогичной исходной модели USE для английского языка, при этом используются методы, разработанные нами для улучшения двойного кодировщика с подходом softmax с аддитивным запасом. Они предназначены не только для поддержания хорошей производительности обучения передачи, но и для эффективного выполнения задач семантического поиска.

Обработка языка в системах прошла долгий путь - от синтаксического анализа базового дерева до больших векторных ассоциативных моделей. Понимание контекста в тексте - одна из самых больших проблем в области НЛП, и универсальный кодировщик предложений решает эту проблему, преобразовывая текст в многомерные векторы, что упрощает ранжирование и обозначение текста.

Image
Image

Согласно Google, « Все три новых модуля построены на архитектуре семантического поиска, которая обычно разделяет кодирование вопросов и ответов на отдельные нейронные сети, что позволяет осуществлять поиск среди миллиардов потенциальных ответов за миллисекунды. Другими словами, это помогает лучше индексировать данные.

Все три многоязычных модуля обучаются с использованием многозадачной структуры двойного кодировщика, аналогичной исходной модели USE для английского языка, при этом используются методы, разработанные нами для улучшения двойного кодировщика с подходом softmax с аддитивным запасом. Они предназначены не только для поддержания хорошей производительности обучения передачи, но и для эффективного выполнения задач семантического поиска.. » Функция Softmax часто используется для экономии вычислительной мощности путем возведения векторов в степень и последующего деления каждого элемента на сумму экспоненты.

Архитектура семантического поиска

«Все три новых модуля построены на архитектурах семантического поиска, которые обычно разделяют кодирование вопросов и ответов на отдельные нейронные сети, что позволяет осуществлять поиск среди миллиардов потенциальных ответов за миллисекунды. Ключом к использованию двойных кодировщиков для эффективного семантического поиска является предварительное кодирование всех возможных ответов на ожидаемые входные запросы и сохранение их в векторной базе данных, оптимизированной для решения проблемы ближайшего соседа, что позволяет быстро найти большое количество кандидатов с хорошими точность и отзыв »

Вы можете скачать эти модули с TensorFlow Hub. Для дальнейшего чтения обратитесь к полной записи блога GoogleAI.

Рекомендуемые:

Тенденции

Фанатский мод Street Fighter 5 исправляет серьезную ошибку сетевого кода, на разработку ушло всего два дня

Microsoft Store для Windows 10 закрывает разделы, предназначенные для образования и бизнеса?

Аркадное событие Apex Legends Grand Soirée добавляет семь ограниченных по времени режимов, включая вид от третьего лица

Сделайте резервную копию файла сохранения перед установкой последнего расширения Monster Hunter World

Instagram скоро позволит вам контролировать, кто упоминает вас на платформе

Доходы от пакета Call Of Duty: Modern Warfare 'Outback' будут переданы в дар австралийской организации помощи лесным пожарам

Pokemon GO добавляет покемонов региона Unova, Trade Evolution

Наступил 2020 год: эти долгожданные функции Skype еще не объявлены

Ubisoft, Bungie, Crytivo: как игровая индустрия поддерживает усилия Австралии по ликвидации последствий лесных пожаров

Последняя версия Windows 10 19541 ломает Internet Explorer для многих пользователей

OnePlus, как сообщается, выбирает панель 2K 120 Гц с отзывчивостью к касанию 240 Гц

Управление плитой со смартфона с помощью Wi-Fi

Как добавить гиперссылки в Gmail с помощью сочетания клавиш

Лучший VPN для Amazon Firestick в 2020 году

Rainbow Six Quarantine Leak дает ранний взгляд на особенности игрового процесса