conversation_by_uef

[student_905_uef]

Co może się stać jeśli w jednej klasie będzie 200 obrazów a w drugiej 1000?

[bot_external]

Jeśli w jednej klasie będzie 200 obrazów a w drugiej 1000, model może zignorować klasę z mniejszą liczbą obrazów. W przykładzie z poprzedniej części kursu, widać, że w danych uczących umieściliśmy tylko pięć nietypowych podobizn kota - bardzo mało w porównaniu do 200 typowych kotów i 200 typowych psów. Model w pewien sposób po prostu je zignorował.

[student_905_uef]

Co to macierz pomyłek

[bot_external]

Macierz pomyłek to tabela z dwoma wierszami i dwiema kolumnami, która przedstawia liczbę wyników prawdziwie pozytywnych, fałszywie negatywnych, fałszywie pozytywnych i prawdziwie negatywnych. Umożliwia to bardziej szczegółową analizę niż prosta obserwacja proporcji poprawnych klasyfikacji (dokładności).

[student_905_uef]

Czym sie różni przeuczenie od niedouczenia

[bot_external]

Przeuczenie i niedouczenie to dwa przeciwstawne zjawiska w uczeniu maszynowym. Przeuczenie występuje, gdy model jest zbyt skomplikowany, by poradzić sobie skutecznie z danymi ze zbioru uczącego. W przeciwieństwie do tego, niedouczenie występuje, gdy model jest zbyt prosty, by poradzić sobie skutecznie z danymi ze zbioru uczącego.

Przykładem niedouczenia może być uczeń, który rozwiązał tylko niewielką część zadań z repetytorium i stara się - mało skutecznie - generalizować ich rozwiązania na inne zadania.

[student_905_uef]

Jak obliczyć F-score

[bot_external]

F-score obliczamy jako średnią harmoniczną precyzji (precision) i czułości (recall). Aby obliczyć F-score, musimy najpierw obliczyć precyzję i czułość modelu.

Precyzja to liczba wyników prawdziwie pozytywnych podzielona przez liczbę wszystkich próbek przewidzianych jako pozytywne, w tym tych nieprawidłowo zidentyfikowanych.

Czułość to liczba wyników prawdziwie pozytywnych podzielona przez liczbę wszystkich próbek, które powinny były zostać zidentyfikowane jako pozytywne.

Po obliczeniu precyzji i czułości, podstawiamy obie wartości do wzoru i obliczamy F-score.

[student_905_uef]

Jeśli nie mam modelu z rzadkimi przypadkami (np. choroba na którą choruje 1% ludzi) to z której metryki powinienem skorzystac?

[bot_external]

Jeśli nie masz modelu z rzadkimi przypadkami, powinieneś skorzystać z precyzji (precision). Precyzja jest najważniejszą metryką, jeśli głównym celem modelu jest ograniczenie liczby przypadków fałszywie pozytywnych. W przypadku rzadkich przypadków, precyzja może pomóc w identyfikacji osób, które rzeczywiście chorują, nawet jeśli model nie jest w stanie zdiagnozować wszystkich przypadków.

Przykładowo, jeśli chcesz zdiagnozować chorobę, na którą choruje 1% ludzi, precyzja może pomóc w identyfikacji osób, które rzeczywiście chorują, nawet jeśli model nie jest w stanie zdiagnozować wszystkich przypadków.