OTUS

Natural Language Processing (NLP)

Начальный уровень
Наставник: Нет
Сертификат: Нет
Формат: Online
Рассрочка: Нет
Язык: Русский
Осталось мест: не ограничено

50 000 ₽/курс

3 месяца

Записаться

Вы будете перенаправлены на сайт партнера.

OTUS

Natural Language Processing (NLP)

Углубленные знания в области NLP: BERT, Transformer, seq2seq, GPT3, PyTorch, n-grammные языковые модели и другие.

Подскажем какие навыки и где прокачать

Узнать

Программа обучения

Тема 1: Введение в NLP
Тема 2: Recap python/ data analysis/ визуализации
Тема 3: Работа со строками + регулярные выражения
Тема 4: Парсинг данных
Тема 1: Введение в нейросети
Тема 2: Градиентный спуск и backpropagation
Тема 3: PyTorch. Часть 1
Тема 4: PyTorch. Часть 2
Тема 5: Рекуррентные сети. Часть 1
Тема 6: Рекуррентные сети. Часть 2
Тема 1: Предобработка данных и понятие векторных представлений слов
Тема 2: Векторные представления слов и работа с предобученными эмбедингами
Тема 3: Задача NER
Тема 4: Языковые модели (n-grammные языковые модели)
Тема 5: Тематическое моделирование
Тема 1: Нейросетевые языковые модели и стратегии генерации текста
Тема 2: Машинный перевод и seq2seq
Тема 3: Архитектура Transformer и концепция attention mechanism
Тема 4: Transfer learning BERT model
Тема 5: Практическое занятие: работа с предобученными языковыми моделями на практическом примере
Тема 6: Генеративные языковые модели GPT3 и методы few, zero-shot learning
Тема 7: Towards ChatGPT
Тема 1: Теория промптинга LLM
Тема 2: Sentence-transformers
Тема 3: Langchain
Тема 4: RAG - генерация на основе базы знаний
Тема 1: Оценка языковых моделей: классические NLP-бенчмарки
Тема 2: Вопросно-ответные системы (задача question-answering)
Тема 3: Распределенное обучение
Тема 4: Создание телеграм-бота
Тема 1: Выбор темы и организация проектной работы
Тема 2: Предзащита №1
Тема 3: Предзащита №2
Тема 4: Защита проектных работ