Практическое применение алгоритма классификации

@ChmutovSergey · Регистрация: 03.08.2017

Студворк — интернет-сервис помощи студентам

Добрый день, форумчане.
Изучать ml начал совсем недавно. Сейчас решаю задачку классификации товаров на Python. Мне необходимо по описанию товара отнести его к одной из категорий. Алгоритм написал и он работает с определенной точностью. Но вот как мне его использовать, чтобы, например в файле Excel, где есть описания проставить им соответствующие категории? Есть какие-то стандартные функции у библиотек или надо под капот в алгоритм лезть? Что-то эту сторону совсем не понимаю.

@passant · 24.07.2018, 10:26

Не совсем понятно, что вы хотите.
Поясните более подробно.
Причем тут EXCEL?
Если я правильно понял, пишете свою классификацию в файл и его конвертируете в файл EXCEL.
Под какой при этом капот вы собрались лезть?

@Garry Galler · 24.07.2018, 12:43

Сообщение от ChmutovSergey

Что-то эту сторону совсем не понимаю.

Классы фичам выставляются вручную. Это же классификация, Карл! Если вы обучаете алгоритм - должна быть обучающая выборка. И если не существует готовых размеченных данных - вы делаете их сами. При этом все метки - эта тяжелая ручная работа.

Python
1
2
3
4
5
# метки классов\категорий документов
target_names = ['литература','медицина','философия','религия','экономика','мифология']
# ответы для обучающего набора, закодированные как индексы меток классов для каждого документа
target = [4,2,2,5,0,4,1,1,0,0,2,3,3,5,1,4,5,5,3,0,2,3,4,1,2,3,0,5,1,4]
# каждая цифра это категория для одного из 30 документов участвующих в обучении. Всего категорий 6 - с метками от 0 до 5.

Но вы могли бы использовать кластеризацию данных - алгоритмы кластеризации не требуют размеченных обучающих данных.

@ChmutovSergey · 24.07.2018, 17:38 **[ТС]**

Garry Galler, да, тестовая выборка понятно что размечается. Мы на ней настроили алгоритм, проверили на проверочной выборке. И вот, что дальше? Нам же его необходимо как-то применять на практике? У нас же не стоит цель обучить алгоритм и не пользоваться им.

Добавлено через 1 минуту
passant, ну excel я привел как пример. вот как писать эту классификацию в файл на неразмеченные данные.

@passant · 24.07.2018, 18:04

тестовая (????) (на самом деле - обучающая!!) выборка понятно что размечается. Мы на ней настроили алгоритм, проверили на проверочной выборке. И вот, что дальше? Нам же его необходимо как-то применять на практике?
...
ну excel я привел как пример. вот как писать эту классификацию в файл на неразмеченные данные.

После того, как вы построили классификатор обучающую выборку можно уничтожить.
Теперь перед вами совсем другая задача: вход - описание объекта, выход - метка класса, к которому вы его приписали.
Только один объект и только одна метка!!! И делайте с ними что хотите - хоть в файл пишите, хоть на экран выводите.

О каких неразмеченных данных речь? Вы просто хотите ПОСЛЕДОВАТЕЛЬНО отклассифицировать рабочую выборку? Ну так повторяете то, что я написал выше в цикле : прочитали из файла строку с описанием - разметили (ранее построенным классификатором)- записали в выходной файл. Повторять до исчерпания файла. Все!

@Garry Galler · 25.07.2018, 01:28

Сообщение от ChmutovSergey

И вот, что дальше? Нам же его необходимо как-то применять на практике?

Сериализуете классификатор, чтобы не обучать его снова и снова, и далее запускаете на рабочих данных для классификации, как и написано постом выше.

Может быть вы все-таки раскроете тайны мадридского двора и секреты полишенеля и расскажите с какой библиотекой работаете и какой конкретный алгоритм вам выбран? Если вы используете scikit-learn, то там все алгоритмы имеют одинаковый и простой интерфейс: fit(X_train, y_train) для обучения, predict(vector) для предсказания меток новым документам\объектам.

Новые блоги и статьи Все статьи Все блоги /
PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Как объединить две одинаковые БД Access с разными данными VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .

@ChmutovSergey 1 / 1 / 0 Регистрация: 03.08.2017 Сообщений: 9

	Практическое применение алгоритма классификации 24.07.2018, 09:46. Показов 2358. Ответов 5 Метки нет (Все метки) Добрый день, форумчане. Изучать ml начал совсем недавно. Сейчас решаю задачку классификации товаров на Python. Мне необходимо по описанию товара отнести его к одной из категорий. Алгоритм написал и он работает с определенной точностью. Но вот как мне его использовать, чтобы, например в файле Excel, где есть описания проставить им соответствующие категории? Есть какие-то стандартные функции у библиотек или надо под капот в алгоритм лезть? Что-то эту сторону совсем не понимаю. 0

@passant 578 / 411 / 69 Регистрация: 09.01.2018 Сообщений: 1,363
	24.07.2018, 10:26
	Не совсем понятно, что вы хотите. Поясните более подробно. Причем тут EXCEL? Если я правильно понял, пишете свою классификацию в файл и его конвертируете в файл EXCEL. Под какой при этом капот вы собрались лезть? 0

@ChmutovSergey 1 / 1 / 0 Регистрация: 03.08.2017 Сообщений: 9
	24.07.2018, 17:38 [ТС]
	Garry Galler, да, тестовая выборка понятно что размечается. Мы на ней настроили алгоритм, проверили на проверочной выборке. И вот, что дальше? Нам же его необходимо как-то применять на практике? У нас же не стоит цель обучить алгоритм и не пользоваться им. Добавлено через 1 минуту passant, ну excel я привел как пример. вот как писать эту классификацию в файл на неразмеченные данные. 0