Аномальные значения. Анализ набора данных

@yvbondarenko · Регистрация: 07.02.2013

Студворк — интернет-сервис помощи студентам

Добрый день.
Уважаемые знатоки, помогите разобраться.
У меня есть времена (в часах) решения какого-то заданий (в моем случае заявки ITSD в ИТ компании):
1,3,7,9,3,7,5,9,300,8

Как из этого набора исключить аномальный показатель 300?
Спасибо за помощь.

@Таланов · 10.02.2013, 15:41

Сообщение от yvbondarenko

Например какое?

Вейбулла.

Добавлено через 2 минуты

Сообщение от myn

ну по такому количеству наблюдений нельзя сделать нормальные выводы ни о каком распределении вообще

А если распределение задано?

@myn · 10.02.2013, 15:51

У Вас распределение далеко от нормального. как от Луны... И даже не логнормальное...
Очень сильная правосторонняя асимметрия, положительная с.в. Нужно искать критерии, которые работают НЕ в предположении о нормальном распределении.

@myn · 10.02.2013, 15:52

Сообщение от Таланов

А если распределение задано?

Мы чего, в ромашку играем? Что. автор бы не сказал, если бы было задано?

@yvbondarenko · 10.02.2013, 16:07 **[ТС]**

Товарищи (хотел бы я вас назвать коллегами, но квалификация не позволяет), дайте я проясню картину.

Все эти цифры, которые находились по ссылке - это время решения разными людьми, разных заданий.
Есть более "легкие" задания - время решения меньше.
Есть более "сложные" (которые не всегда зависят от квалификации сотрудника, а еще и от внешних факторов) - время решения более длительное.
Есть задания - которые просто не решались продолжительное время (например, его существования никто не заметил или не хотел замечать)

Но мне надо понять и отбросить те задания, которые решались ненормально долго (пусть даже в выброс попадут полезные, но с учетом того, что их будет не слишком много), дабы на конечный показатель они не повлияли.
По итогу, мне надо получить что-то похожее на эффективность подразделений по решению заданий.

P.S.
я понимаю, что мне отвечают знающие люди. Но просьба учитывать мою неполную осведомленность в этой области знаний))

@Таланов · 10.02.2013, 16:27

Сообщение от yvbondarenko

Вот например http://www.ex.ua/view_storage/610921678195 (мой ряд из 2614 членов example.xlsx)
Выпало 93 (По той же ссылке result.txt)

Это что такое?

Добавлено через 2 минуты

Сообщение от yvbondarenko

По итогу, мне надо получить что-то похожее на эффективность подразделений по решению заданий.

Можно по медианному значению, оно защищёно от выбросов.

@yvbondarenko · 10.02.2013, 16:27 **[ТС]**

example.xlsx - времена в часах по решению каждого задания
result.txt - результат выполнения программы (которая использует критерий Граббса), которая выбросила из ряда 93 члена, как аномальные.

@Таланов · 10.02.2013, 16:35

Сообщение от yvbondarenko

example.xlsx - времена в часах по решению каждого задания

Одним подразделением?

@yvbondarenko · 10.02.2013, 16:37 **[ТС]**

Многими подразделениями, которые относятся к одному департаменту.
Другие департаменты я не брал.

@Таланов · 10.02.2013, 16:41

Сообщение от yvbondarenko

example.xlsx - времена в часах по решению каждого задания

Нужно попытаться подобрать функцию распределения по этим данным.

Сообщение от yvbondarenko

result.txt - результат выполнения программы (которая использует критерий Граббса), которая выбросила из ряда 93 члена, как аномальные.

Этот критерий не годится, он под нормальное распределение заточен.

@myn · 10.02.2013, 16:53

как бы я сделала на Вашем месте. Вот есть гистограмма - я Вам ее привела Вашего полного распределения. по ней легко строится функция распределения - функция накопленных вероятностей (от 0 до 1 ) - показывающая вероятность попадания левее для любого интересующего значения.
я бы задала стандартную вероятность 0,95 - в статистике при любых обычных исследованиях это самое распространенное - вер-ть ошибки 0,05, доверительная вероятность - 0,95. Вот найти квантиль уровня 0,95 (или , если нужна бОльшая надежность - можно взять 0,99) по Вашей выборке - я нашла - см. файл и просто резать все, что уходит вправо.

Это если не надо делить еще задания на разные по степени сложности. Может, я не очень уловила Ваше задание.

@yvbondarenko · 10.02.2013, 16:53 **[ТС]**

Александр, в "какую сторону" мне смотреть?
И что надо понять для реализации, пускай даже с большой погрешностью?

@myn · 10.02.2013, 16:55

и это решение позволяет точно, исходя именно из ВАШИХ данных, даже не подбирая распределение, по Вашей функции распределения, задавать надежность, какая вам нужна и отрезать правый хвост.

@yvbondarenko · 10.02.2013, 16:56 **[ТС]**

Myn, спасибо. Сейчас посмотрю, что я смогу понять)))

@Таланов · 10.02.2013, 16:56

Сообщение от yvbondarenko

Многими подразделениями, которые относятся к одному департаменту.
Другие департаменты я не брал.

Правильно ли я понимаю? У вас есть данные по решению 200 задач каждым из 10 подразделений. Здесь вы их смешали в одну кучу. Вам нужно сравнить их по эффективности. Хотелось бы по среднему, но картину искажают выбросы.

@myn · 10.02.2013, 16:57

Сообщение от yvbondarenko

Myn, спасибо. Сейчас посмотрю, что я смогу понять)))

да там все понятно

@yvbondarenko · 10.02.2013, 17:04 **[ТС]**

Сообщение от Таланов

Правильно ли я понимаю? У вас есть данные по решению 200 задач каждым из 10 подразделений. Здесь вы их смешали в одну кучу. Вам нужно сравнить их по эффективности. Хотелось бы по среднему, но картину искажают выбросы.

Примерно так:
Подразделение 1 за месяц решило 100 событий
Подразделение 2 за месяц решило 30 событий
Подразделение 3 за месяц решило 250 событий
А сравнивать я буду с другими департаментами.

Сообщение от Таланов

Хотелось бы по среднему, но картину искажают выбросы.

Да, так

@Таланов · 10.02.2013, 17:09

Сообщение от yvbondarenko

А сравнивать я буду с другими департаментами.
Да, так

Берите медианное, срединное значения или центр сгибов. На них выбросы не влияют.

Новые блоги и статьи Все статьи Все блоги /
Особенности gif сгенерированных в Си russiannick 21.10.2026 Рассмотрим генерацию gif файлов, которые в Си имеют свои особенности. Gif представляет собой графический формат популярный в интернете. Посмотрим на палитру. Gif файл сгенерированный в си отличается. . .	FPS контроллер с анимированными Y-Bot и 3D-звуком miniaudio (Box3D, Recast, BehaviorTree.CPP, ozz-animation, ImGui, OpenGL и SDL3) 8Observer8 18.10.2026 Содержание блога \| English Version Полное мультиплатформенное руководство по стартовому проекту с FPS-контроллером игрока, анимированными роботами Y-Bot с 4-слойным блендингом, 3D-физикой Box3D,. . .	Локальный http сервер Argus19 17.10.2026 Локальный http сервер На работе, на двух локальных компьютерах круглосуточно работают программы опроса приборов с записью в книги Excel,которые раз в сутки записываются на сервер компании. Т. к. . . .	Копировать Windows на новый диск на UEFI damix 17.10.2026 https:/ / uriesk. wordpress. com/ 2016/ 11/ 01/ move-window-10-to-ssd-on-a-uefi-dualboot-system-with-basic-linux-tools/ TL DR Вставляем диск, а старый подключаем через переходник, грузимся с лайва. . .
ИИ не может найти нужный язык в списке Supersumestria 05.10.2026 Я ему даю вот такое изображение и прошу найти и подчеркнуть немецкий язык. Возвращает он вот это: https:/ / i. **********/ vqBWLe2. png Нужную строчку в 3й колонке просто выдумал. . Это. . .	Новая последняя моя музыка в SUNO zorxor 05.10.2026 Здравствуйте, дорогие мои друзья! С большой радостью я хотел бы представить вам свою новую последнею музыку, которую сгенерировала мне по моей просьбе нейросеть SUNO. С уважением, zorxor. Это. . .	Программный домашний кинотеатр russiannick 27.09.2026 Сподобился на программный домашний кинотеатр. В качестве ЯВУ по традиции выбрал js. В помощники взял Яндекс-Алису. Было создано три зала на разные интересы. исторические и ретро сериал Хичкок. . .	Беседа с ИИ о программистах, недопускающих к созданию и правке кода генеративные ИИ и причины этого zorxor 21.09.2026 Раньше я радовался или получал некоторые эмоции, пусть небольшие, но всё же, от самого процесса написания кода, рекомпиляции и запуска, видя постепенное развитие программы и прочее. А теперь лень. . .

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20

	Аномальные значения. Анализ набора данных 07.02.2013, 23:26. Показов 10902. Ответов 36 Метки нет (Все метки) Добрый день. Уважаемые знатоки, помогите разобраться. У меня есть времена (в часах) решения какого-то заданий (в моем случае заявки ITSD в ИТ компании): 1,3,7,9,3,7,5,9,300,8 Как из этого набора исключить аномальный показатель 300? Спасибо за помощь. 0

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20
	10.02.2013, 16:07 [ТС]
	Товарищи (хотел бы я вас назвать коллегами, но квалификация не позволяет), дайте я проясню картину. Все эти цифры, которые находились по ссылке - это время решения разными людьми, разных заданий. Есть более "легкие" задания - время решения меньше. Есть более "сложные" (которые не всегда зависят от квалификации сотрудника, а еще и от внешних факторов) - время решения более длительное. Есть задания - которые просто не решались продолжительное время (например, его существования никто не заметил или не хотел замечать) Но мне надо понять и отбросить те задания, которые решались ненормально долго (пусть даже в выброс попадут полезные, но с учетом того, что их будет не слишком много), дабы на конечный показатель они не повлияли. По итогу, мне надо получить что-то похожее на эффективность подразделений по решению заданий. P.S. я понимаю, что мне отвечают знающие люди. Но просьба учитывать мою неполную осведомленность в этой области знаний)) 0

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20
	10.02.2013, 16:27 [ТС]
	example.xlsx - времена в часах по решению каждого задания result.txt - результат выполнения программы (которая использует критерий Граббса), которая выбросила из ряда 93 члена, как аномальные. 0

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20
	10.02.2013, 16:37 [ТС]
	Многими подразделениями, которые относятся к одному департаменту. Другие департаменты я не брал. 0

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20
	10.02.2013, 16:53 [ТС]
	Александр, в "какую сторону" мне смотреть? И что надо понять для реализации, пускай даже с большой погрешностью? 0

@myn 832 / 679 / 101 Регистрация: 11.11.2012 Сообщений: 1,800
	10.02.2013, 16:55
	и это решение позволяет точно, исходя именно из ВАШИХ данных, даже не подбирая распределение, по Вашей функции распределения, задавать надежность, какая вам нужна и отрезать правый хвост. 1

@yvbondarenko 0 / 0 / 1 Регистрация: 07.02.2013 Сообщений: 20
	10.02.2013, 16:56 [ТС]
	Myn, спасибо. Сейчас посмотрю, что я смогу понять))) 0