Что такое N-gram

N-gram — это последовательность из N элементов (обычно слов или символов) в тексте. Используется в NLP для анализа и моделирования текста.

Примеры:

• Униграм (1-gram): ["я", "люблю", "машинное", "обучение"]
• Биграм (2-gram): ["я люблю", "люблю машинное", "машинное обучение"]
• Триграм (3-gram): ["я люблю машинное", "люблю машинное обучение"]

Применение: предсказание следующего слова, исправление ошибок, классификация текста.

Пример кода (Python):

from nltk import ngrams
text = "я люблю машинное обучение".split()
bigrams = list(ngrams(text, 2))
print(bigrams)  # [('я', 'люблю'), ('люблю', 'машинное'), ('машинное', 'обучение')]