KDnuggets выпустили шпаргалку по Scikit-LLM — библиотеке, которая оборачивает…

⚠️ KDnuggets выпустили шпаргалку по Scikit-LLM — библиотеке, которая оборачивает LLM в привычный scikit-learn API с fit/predict, так что модель нативно встраивается в Pipeline и кросс-валидацию вместо кустарного скрипта с циклами API-вызовов и try/except на случай, если модель вернула прозу вместо метки.

Самый полезный инструмент — ZeroShotGPTClassifier: вызов fit(None, [...]) с одними только метками-кандидатами выглядит странно, пока не осознаешь, что сами метки и есть постановка задачи — расплывчатые метки дают расплывчатый результат. Когда zero-shot не хватает, лучше сразу брать DynamicFewShotGPTClassifier — он подбирает ближайшие примеры под каждый класс и каждый образец отдельно, а не пихает в промпт весь обучающий набор целиком. Есть и GPTVectorizer для превращения текста в вектор фиксированной длины (дальше — обычный scikit-learn поверх эмбеддингов), и GPTTranslator как трансформер перед классификатором, обученным только на английском.

⁉️ Главная оговорка — стоимость токенов растёт так же быстро, как растут ваши scikit-learn привычки: cross_val_score с cv=3 — это уже втрое больше вызовов API, а grid search умножает и это.