Zadanie #184
Autor:Carina Brebenaru
Trudność
Twój najlepszy wynik
Nie dotyczy
W odległym wszechświecie Galactic Wars w nieustannym konflikcie pozostają dwie równie potężne armie: Jedai i Imperialni (Calmtroopers).
Jeden z najpotężniejszych Jedai, Anaklyn Groundwalker, utknął w misji z licznymi walkami, z których tym razem nie jest pewien, czy ujdzie z życiem. Palme, jego przyjaciółka, prosi Cię o pomoc i chce przewidzieć, czy Anaklyn odniesie zwycięstwo na podstawie różnych czynników bitewnych, takich jak broń, pancerz, siła, a także stan morale (pewność siebie).
Na Twoje szczęście, pewnemu Calmtrooperowi (z obozu Imperialnych) wypadł zestaw z jego ekwipunkiem, dzięki czemu możesz zbudować model przewidujący zwycięstwo Anaklyna.
Znalazłeś dwa pliki:
train.csv - dane o poprzednich walkach, zawierające zwycięzcętest.csv - dane o przyszłych bitwach, bez znajomości zwycięzcy| Nazwa | Typ | Opis |
|---|---|---|
| FightID | int | Unikalne ID walki |
| weapon_jedai | object | Broń Jedai |
| armour_jedai | object | Ochrona pancerza Jedai (%) |
| weapon_calmtrooper | object | Broń Calmtroopera |
| armour_calmtrooper | object | Ochrona pancerza Calmtroopera (%) |
| injuries | object | Ranny wojownik |
| number_of_fights | float | Liczba stoczonych walk |
| force_level | float | Siła przeciwnika |
| accuracy_calmtrooper | float | Celność strzałów Calmtroopera |
| fight_planet | object | Planeta, na której toczy się walka |
| weather_conditions | object | Warunki pogodowe |
| surprise_attack | bool | Ataki z zaskoczenia |
| moral_jedai | float | Stan morale Jedai |
| moral_calmtrooper | float | Stan morale Calmtroopera |
| winner | int | Zwycięzca walki |
Palme, znana ze swojej wymagającej natury (i ponieważ zauważyła Twoje umiejętności), prosi Cię o rozwiązanie 4 zadań.
Podzadania 1 i 2 dotyczą analizy i przetwarzania zbiorów danych.
Podzadania 3 i 4 oceniają wydajność modelu przypisywania etykiet oraz modelu klasyfikacji.
Aby dobrze przygotować się do walki, Anaklyn musi wiedzieć, jak się ubrać.
Oblicz, ile walk w test.csv odbywa się na planetach typu „Nabira”, a warunki pogodowe (weather_conditions) to opady śniegu Snow.
Odkryłeś, że Calmtrooperzy zastawili na Ciebie pułapkę i w rzeczywistości nie używają już broni, którą znał Anaklyn:
W zbiorze danych train.csv zastąp wszystkie wystąpienia broni Experimental Weapon bronią Double Blaster i wyświetl, ile wartości musiałeś zastąpić.
(W przypadku kolejnych podzadań, w test.csv ta zamiana została już dokonana).
Analizując poprzednie walki, Anaklyn zauważył, że można je zaklasyfikować do 3 stylów walki (0, 1, 2), wykorzystując umiejętności Jedai i przeciwnika (siła, morale, pancerz, doświadczenie itp.).
Dla każdej walki w test.csv należy określić odpowiedni styl walki.
Metryka oceny
Do oceny klasyfikacji walk używany jest Adjusted Rand Index (ARI), który mierzy podobieństwo między dwoma podziałami, korygując je o przypadkowe dopasowanie.
Współczynnik ARI dla dwóch podziałów definiuje się jako:
ARI = (RI - E[RI]) / (max(RI) - E[RI])
gdzie:
Jeśli uzyskana liczba jest bliska 1, oznacza to, że podział na typy walk został wykonany umiejętnie, a granice między cechami walk zostały poprawnie zidentyfikowane. Życie Anaklyna zależy od znajomości tych typów bitew, dlatego maksymalna liczba punktów za to podzadanie zostanie przyznana tylko wtedy, gdy wartość metryki oceny wynosi >= 0.95.
Mając do dyspozycji zbiór danych opisujący poszczególne walki między Jedai a Calmtrooperem, zbuduj model klasyfikacji, który przewidzi wynik walki dla każdego wiersza w test.csv.
Zmienna docelowa to: winner (0 - wygrywa Calmtrooper / 1 - wygrywa Jedai).
Ocena odbywa się przy użyciu wyniku F1 macro.
Wynik F1 macro oblicza się następująco:
Ta metryka traktuje obie klasy jednakowo i karze modele, które poprawnie przewidują tylko klasę większościową.
Progi oceny:
Końcowe zgłoszenie musi być plikiem CSV o nazwie submission.csv, zawierającym dokładnie 3 kolumny:
subtaskID - numer podzadania (1, 2, 3, 4)datapointID - ID każdej walkianswer - odpowiedź pasująca do danego podzadania i datapointIDUwaga: W przypadku podzadań 1 i 2, które wymagają pojedynczej odpowiedzi, należy wyświetlić tylko jeden wiersz dla każdego podzadania, z datapointID równym odpowiednio 1 i 2.