Duration 20:21
16+
Play
Talk video

Решение задачи текстовой классификации и информационного поиска с применением языковой модели BERT

The audio is available only after a purchase
To tickets
Денис Антюхов
ML Lead направления NLP Платформа at Сбербанк
  • Video
  • Audio
  • Theses
  • Video
  • Audio
Conversations'19 Dev
June 28 2019, Санкт-Петербург, Россия
Conversations'19 Dev
Video
Решение задачи текстовой классификации и информационного поиска с применением языковой модели BERT
Purchased
In cart
550 ₽
550 ₽
$9
$9
€ 8
€ 8
To favorites
3
I like 0
I dislike 0
Purchased
In cart
550 ₽
550 ₽
$9
$9
€ 8
€ 8
  • Description
  • Discussion

About speaker

About talk

Topic: Business

Сегодня BERT показывает state-of-the-art результаты на многих бенчмарках. Одна модель способна решать множество NLP задач, не только вопросно-ответные: анализ тональности, извлечение сущностей, анализ смысловой близости двух единиц контента.

BERT можно предобучить, но это ресурсозатратно. Для многих задач подойдут предобученные open-source модели.

Даже без дообучения на конкретной задаче, предобученная модель BERT может быть использована для генерации текстовых представлений (эмбеддингов).

Вибираем способ дообучения BERT. Плюсы и нюансы end-to-end и fixed (frozen) методов.

Главные аспекты надежности сервиса.

00:20 Что такое модель BERT

01:03 Этапы тренировки модели BERT

02:38 Для чего можно использовать нетренированную модель BERT

03:33 Как выглядит векторное представление t-SNE разложения

04:18 Как происходит TSNE разложение с помощью модели BERT

05:02 2 подхода к дообучению модели BERT

07:32 Пример работы BERT-хостов

09:27 Какую производительность можно получить, используя модель BERT

10:48 Что делать при появлении дополнительных точек отказов

12:03 Полезные ссылки

12:51 Вопрос: Ограничена ли предметная область модели BERT?

13:33 Вопрос: Можно ли заменить векторные представления моделью BERT?

14:53 Вопрос: Как лучше развивать модель BERT?

16:52 Вопрос: Как используется модель BERT?

19:20 Вопрос: Какие модели также используются на данный момент?

Share

Cackle comments for the website

Buy this talk

Access to the talk «Решение задачи текстовой классификации и информационного поиска с применением языковой модели BERT»
Purchased
In cart
550 ₽
550 ₽
$9
$9
€ 8
€ 8

Video

Access to all videos «Conversations'19 Dev»
Purchased
In cart
4 000 ₽
4 000 ₽
$65
$65
€ 59
€ 59
Ticket

Interested in topic «Business»?

You might be interested in videos from this event

June 28 2019
Санкт-Петербург
16
47
ai, bert, gamedev, vui, голосовые ассистенты, ии, искусственный интеллект, машинное обучение, навыки алисы, чат-боты

Buy this video

Video

Access to the talk 'Решение задачи текстовой классификации и информационного поиска с применением языковой модели BERT'
Purchased
In cart
550 ₽
550 ₽
$9
$9
€ 8
€ 8

Conference Cast

ConferenceCast.tv — conference video talk archive.

With this service you can find interesting talks especially for you!

Conference Cast
677 conferences
15277 speakers
7353 hours of content