Какие данные подготовить
CSV/TSV с URL и Текст, до 10 документов и 100 000 символов текста. Задайте запрос и параметры k1 и b; исходные значения — 1,2 и 0,75.
Что вы получите
Результат включает длину документов, оценку BM25, вклад слов и отсутствующие словоформы. Расчёт относится только к текущему корпусу и меняется, если состав корпуса меняется.
В двух текстах есть слово «монтаж», но слово «гарантия» встречается только в одном. Вклад второго слова зависит от его редкости в предоставленной выборке. Высокая оценка не сообщает, правдиво ли обещание гарантии и отвечает ли страница потребностям покупателя.
Порядок работы
- Соберите сопоставимые тексты без меню и повторяющихся служебных блоков.
- Введите запрос так, как хотите проверять его буквальные словоформы.
- Сравните оценки и вклад отдельных слов.
- Проверьте смысл отсутствующих терминов и добавляйте только подтверждённые сведения.
Границы результата
Лемматизация не выполняется: разные словоформы рассматриваются буквально. Оценка не воспроизводит ранжирование Яндекса или Google и не прогнозирует позиции. Нельзя считать высокий BM25 самостоятельной целью текста.
Как принять решение
Используйте расчёт как повод для редакторского анализа: какая характеристика товара, ограничение услуги или условие заказа пропущены? Содержательное дополнение должно быть полезно человеку и соответствовать фактам.
Сохраняйте исходную выгрузку и дату наблюдения вместе с выводом. Если вводите результат вручную, отделяйте факт от предположения. В конструкторе можно объединить несколько источников, назначить приоритет и сформировать задание с проверяемым критерием готовности.
Продолжить разбор
Какие факты нужны на странице для ИИ-поиска · Образцы документов · Шаблоны передачи в работу