Кластеризация в python

@gravity48 · Регистрация: 30.05.2014

Студворк — интернет-сервис помощи студентам

Всем доброго времени суток!. В простом примере есть два класса: спортивные новости и другие произвольные статьи. При кластеризации текста, я использую логистическую регрессию из sklearn и получаю нормальные результаты, но я бы хотел использовать такой классификатор, который будет обучаться только на одном классе (спортивные новости) и в дальнейшем выдавать процентную соотносимость исследуемой новости к классу (спортивных новостей). В логистической регрессии на вход модели обучения необходимо подать минимум два класса, что немного неудобно потому что приходится готовить обучащую выборку как одного классса так и другого, а kmeans с оценкой расстояния от центра класстера не показал должных результатов. Подскажите классификатор, который может обучаться только на одном классе? Заранее спасибо если дочитали до конца и откликнулись

@Nick07 · 26.11.2019, 11:33

Сообщение от gravity48

Подскажите классификатор, который может обучаться только на одном классе?

Очень интересная идея, типа "Один против всех".

@gravity48 · 26.11.2019, 11:48 **[ТС]**

Просто это было бы удобно, есть возможность создать несколько классов, запустил их в цикле проверил на соотносимость в процентах выбрал лучшее или откинул бы в корзину

@passant · 26.11.2019, 11:54

Этот подраздел в теории классификации называется "One-class classification"
Забейте это у Гуугл получите достаточно информации для размышлений.
Начать можно отсюда:
https://en.wikipedia.org/wiki/... sification
https://datascience.stackexcha... sification

@dondublon · 27.11.2019, 14:30

gravity48,

Заранее спасибо если дочитали до конца и откликнулись

Пожалуйста.

Думаю, вы немного не с того конца мыслите. У вас как основа всего считается "логистическая регрессия", которой вы что-то подаёте. Но ЛР - это просто способ посчитать h от х. Сначала надо решить, что считать. Обучение-то вообще с учителем или без? Вы так легко перескакиваете от классификации к кластеризации (k-means):

При кластеризации текста, .... я бы хотел использовать ... классификатор,

@passant · 27.11.2019, 16:48

Сообщение от dondublon

gravity48,
Обучение-то вообще с учителем или без? Вы так легко перескакиваете от классификации к кластеризации (k-means):

Про перескакивание ТС - не спорю.
Но парадокс заключается в том. что в One-class classification, о которой я упомянул выше, эти две технологии практически сливаются воедино.

@dondublon · 28.11.2019, 11:13

passant, интересный метод, не знал.

@gravity48 · 09.01.2020, 11:00 **[ТС]**

Спасибо большое за помощь! Использовал One-class classification, метод обучения с усителем, на практике использовал библиотеку sklearn, модуль "OneClassSVM". Обучение здесь - https://scikit-learn.org/stabl... -detection.

Новые блоги и статьи Все статьи Все блоги /
SDL3 для Web (WebAssembly): Работа со звуком через SDL3_mixer 8Observer8 08.02.2026 Содержание блога Пошагово создадим проект для загрузки звукового файла и воспроизведения звука с помощью библиотеки SDL3_mixer. Звук будет воспроизводиться по клику мышки по холсту на Desktop и по. . .	SDL3 для Web (WebAssembly): Основы отладки веб-приложений на SDL3 по USB и Wi-Fi, запущенных в браузере мобильных устройств 8Observer8 07.02.2026 Содержание блога Браузер Chrome имеет средства для отладки мобильных веб-приложений по USB. В этой пошаговой инструкции ограничимся работой с консолью. Вывод в консоль - это часть процесса. . .	SDL3 для Web (WebAssembly): Обработчик клика мыши в браузере ПК и касания экрана в браузере на мобильном устройстве 8Observer8 02.02.2026 Содержание блога Для начала пошагово создадим рабочий пример для подготовки к экспериментам в браузере ПК и в браузере мобильного устройства. Потом напишем обработчик клика мыши и обработчик. . .	Философия технологии iceja 01.02.2026 На мой взгляд у человека в технических проектах остается роль генерального директора. Все остальное нейронки делают уже лучше человека. Они не могут нести предпринимательские риски, не могут. . .
SDL3 для Web (WebAssembly): Вывод текста со шрифтом TTF с помощью SDL3_ttf 8Observer8 01.02.2026 Содержание блога В этой пошаговой инструкции создадим с нуля веб-приложение, которое выводит текст в окне браузера. Запустим на Android на локальном сервере. Загрузим Release на бесплатный. . .	SDL3 для Web (WebAssembly): Сборка C/C++ проекта из консоли 8Observer8 30.01.2026 Содержание блога Если вы откроете примеры для начинающих на официальном репозитории SDL3 в папке: examples, то вы увидите, что все примеры используют следующие четыре обязательные функции, а. . .	SDL3 для Web (WebAssembly): Установка Emscripten SDK (emsdk) и CMake для сборки C и C++ приложений в Wasm 8Observer8 30.01.2026 Содержание блога Для того чтобы скачать Emscripten SDK (emsdk) необходимо сначало скачать и уставить Git: Install for Windows. Следуйте стандартной процедуре установки Git через установщик. . . .	SDL3 для Android: Подключение Box2D v3, физика и отрисовка коллайдеров 8Observer8 29.01.2026 Содержание блога Box2D - это библиотека для 2D физики для анимаций и игр. С её помощью можно определять были ли коллизии между конкретными объектами. Версия v3 была полностью переписана на Си, в. . .

@gravity48 1 / 1 / 1 Регистрация: 30.05.2014 Сообщений: 35

	Кластеризация в python 26.11.2019, 10:45. Показов 1916. Ответов 7 Метки нет (Все метки) Всем доброго времени суток!. В простом примере есть два класса: спортивные новости и другие произвольные статьи. При кластеризации текста, я использую логистическую регрессию из sklearn и получаю нормальные результаты, но я бы хотел использовать такой классификатор, который будет обучаться только на одном классе (спортивные новости) и в дальнейшем выдавать процентную соотносимость исследуемой новости к классу (спортивных новостей). В логистической регрессии на вход модели обучения необходимо подать минимум два класса, что немного неудобно потому что приходится готовить обучащую выборку как одного классса так и другого, а kmeans с оценкой расстояния от центра класстера не показал должных результатов. Подскажите классификатор, который может обучаться только на одном классе? Заранее спасибо если дочитали до конца и откликнулись 0

@gravity48 1 / 1 / 1 Регистрация: 30.05.2014 Сообщений: 35
	26.11.2019, 11:48 [ТС]
	Просто это было бы удобно, есть возможность создать несколько классов, запустил их в цикле проверил на соотносимость в процентах выбрал лучшее или откинул бы в корзину 0

@passant 578 / 411 / 69 Регистрация: 09.01.2018 Сообщений: 1,363
	26.11.2019, 11:54
	Этот подраздел в теории классификации называется "One-class classification" Забейте это у Гуугл получите достаточно информации для размышлений. Начать можно отсюда: https://en.wikipedia.org/wiki/... sification https://datascience.stackexcha... sification 1

@dondublon 4652 / 2072 / 366 Регистрация: 17.03.2012 Сообщений: 10,182 Записей в блоге: 6
	28.11.2019, 11:13
	passant, интересный метод, не знал. 0

@gravity48 1 / 1 / 1 Регистрация: 30.05.2014 Сообщений: 35
	09.01.2020, 11:00 [ТС]
	Спасибо большое за помощь! Использовал One-class classification, метод обучения с усителем, на практике использовал библиотеку sklearn, модуль "OneClassSVM". Обучение здесь - https://scikit-learn.org/stabl... -detection. 0