Инструменты оценки качества классификации

Вопросы общего характера по ГИС и дистанционному зондированию, не связанные с конкретным ПО.
Ответить
Аватара пользователя
Crackfox
Участник
Сообщения: 91
Зарегистрирован: 02 мар 2016, 20:29
Репутация: 14
Ваше звание: разрядник
Откуда: МСК

Инструменты оценки качества классификации

Сообщение Crackfox » 26 ноя 2018, 14:05

Добрый день. Требуется оценить результаты классификации для пары 10 ков растров (территория одна). Есть ли готовые opensource модули и пакеты, которые предназначены для оценки классификации стандартными методами (f-мера, матрица перепутывания , точность и тд)?

gamm
Гуру
Сообщения: 2813
Зарегистрирован: 15 окт 2010, 08:33
Репутация: 633
Ваше звание: программист
Откуда: Казань

Re: Инструменты оценки качества классификации

Сообщение gamm » 26 ноя 2018, 18:34

а не проще скрипт написать, на R или python - все из кросс-таблицы получается.

P.S. F-меры требуют, насколько я понял, еще и класса "не определено", они вроде про retrival, а не про классификацию https://en.wikipedia.org/wiki/F1_score, или имеется в виду что-то другое?

Аватара пользователя
Crackfox
Участник
Сообщения: 91
Зарегистрирован: 02 мар 2016, 20:29
Репутация: 14
Ваше звание: разрядник
Откуда: МСК

Re: Инструменты оценки качества классификации

Сообщение Crackfox » 03 дек 2018, 11:21

gamm писал(а):
26 ноя 2018, 18:34
а не проще скрипт написать, на R или
оказалось что, да, проще)) в R имеется встроенная функция

Код: Выделить всё

confusionMatrix()
которая заодно производит стандартные оценки: accuracy, коэффициент согласованности Каппа ну собственно матрицу строит
gamm писал(а):
26 ноя 2018, 18:34
насколько я понял, еще и класса "не определено"
да вроде нет, все на квартете tp-tn-fp-fn держится, как я понимаю:
F-мера представляет собой гармоническое среднее между точностью и полнотой.
, вроде по Вашей ссылке также.


Ответить

Вернуться в «Общие вопросы»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 1 гость