Публикации по теме 'naturallanguageprocessing'


Изучение GPTZero: новый подход к эффективной обработке естественного языка
Рост обработки естественного языка привел к развитию множества языковых моделей, но ни одна из них не была такой мощной, как GPT-3. Однако даже у GPT-3 есть ограничения, и в результате исследователи ищут новые способы улучшить обработку естественного языка. Одним из таких подходов является «gptZero», движение, направленное на создание языковых моделей, требующих меньше ресурсов, чем модели GPT. В этой статье мы рассмотрим движение gptZero, его цели и некоторые примеры проектов gptZero...

Реализация пользовательской модели классификации намерений с помощью Rasa
Этот пост изначально был написан пользователем Анна Вечкаева Rasa — это фреймворк для разработки диалоговых агентов ИИ, который предлагает ряд готовых моделей, которые можно обучать на пользовательских данных. Модели варьируются от простых, например, основанных на ключевых словах для классификации намерений и моделей на основе правил для управления диалогами, до более сложных, основанных на преобразователях, таких как DIET (преобразователь двойного намерения и сущности) и TED..

НЛП с PySpark
В этой статье мы узнаем о PySpark и о том, как мы можем использовать его для выполнения любой задачи классификации в нашем случае «Классификация новостей» . Что такое PySpark: PySpark — это API Python для Apache Spark, распределенная вычислительная среда с открытым исходным кодом и набор библиотек для крупномасштабной обработки данных в режиме реального времени. Если вы уже знакомы с Python и библиотеками, такими как Pandas, то PySpark — хороший язык для изучения, чтобы..

Создание спам-фильтра с использованием Naive Bayes с TextAnalysis.jl
Привет! Сегодня я расскажу вам больше о том, что я сделал для создания спам-фильтра с использованием Наивного Байеса для обнаружения спам-данных из этого набора данных на kaggle с помощью машинного обучения UCI, а также с использованием TextAnalysis.jl на Юлии . . Я начал с просмотра документов TextAnalysis.jl, чтобы лучше понять, как именно работает Классификатор NaiveBayes . using TextAnalysis: NaiveBayesClassifier, fit!, predict m = NaiveBayesClassifier([:legal,..