Zadatak #184
Autor:Carina Brebenaru
Težina
Vaš najbolji rezultat
N/D
U udaljenom svemiru Galactic Wars u stalnom su sukobu dvije podjednako moćne vojske: Jediji i Imperiali (Calmtroopers).
Jedan od najmoćnijih Jedija, Anaklyn Groundwalker, uhvaćen je u misiji s brojnim borbama iz kojih ovaj put nije siguran da će se izvući. Palme, njegova prijateljica, traži tvoju pomoć i želi predvidjeti hoće li Anaklyn biti pobjednik na temelju različitih čimbenika bitaka, kao što su oružje, oklop, snaga, ali i moralno stanje (samopouzdanje).
Srećom po tebe, jednom Calmtrooperu (iz tabora Imperiala) ispao je set s njegovom opremom te možeš izgraditi model koji može predvidjeti Anaklynovu pobjedu.
Pronašao si dvije datoteke:
train.csv - podaci o prethodnim borbama koji sadrže pobjednikatest.csv - podaci o budućim bitkama, bez poznavanja pobjednika| Ime | Tip | Opis |
|---|---|---|
| FightID | int | Jedinstveni ID borbe |
| weapon_jedai | object | Oružje Jedija |
| armour_jedai | object | Zaštita oklopa Jedija (%) |
| weapon_calmtrooper | object | Oružje Calmtroopera |
| armour_calmtrooper | object | Zaštita oklopa Calmtroopera (%) |
| injuries | object | Ozlijeđeni borac |
| number_of_fights | float | Broj vođenih borbi |
| force_level | float | Snaga protivnika |
| accuracy_calmtrooper | float | Točnost pucanja Calmtroopera |
| fight_planet | object | Planet na kojem se odvija borba |
| weather_conditions | object | Vremenski uvjeti |
| surprise_attack | bool | Iznenadni napadi |
| moral_jedai | float | Moralno stanje Jedija |
| moral_calmtrooper | float | Moralno stanje Calmtroopera |
| winner | int | Pobjednik borbe |
Palme, poznata kao zahtjevna (i jer je primijetila tvoju vještinu), traži od tebe da riješiš 4 zadatka.
Podzadaci 1 i 2 uključuju analizu i obradu skupova podataka.
Podzadaci 3 i 4 ocjenjuju performanse modela za dodjelu oznaka (labela), odnosno modela za klasifikaciju.
Kako bi se dobro opremio za borbu, Anaklyn treba znati kako se odjenuti.
Izračunaj koliko se borbi iz test.csv odvija na planetima tipa "Nabira" uz vremenske uvjete (weather_conditions) tipa snijeg Snow.
Otkrio si da ti je CalmTrooper postavio zamku i da oni zapravo više ne koriste oružja koja je Anaklyn poznavao:
Zamijeni u skupu podataka train.csv sva pojavljivanja oružja Experimental Weapon s Double Blaster i ispiši koliko si vrijednosti morao zamijeniti.
(Za sljedeće podzadatke, u test.csv je ova zamjena već izvršena)
Analizirajući prethodne borbe, Anaklyn je primijetio da se one mogu svrstati u 3 stila borbe (0, 1, 2), koristeći vještine Jedija i protivnika (snaga, moral, oklop, iskustvo, itd.).
Za svaku borbu u test.csv potrebno je odrediti odgovarajući stil borbe.
Metrika evaluacije
Za evaluaciju kategorizacije borbi koristi se Adjusted Rand Index (ARI), koji mjeri sličnost između dvije podjele, prilagođavajući se slučajnom podudaranju.
ARI koeficijent za dvije podjele definiran je kao:
ARI = (RI - E[RI]) / (max(RI) - E[RI])
gdje:
Ako je dobiveni broj blizu 1, to znači da je podjela na tipove borbi napravljena vješto i da su granice između karakteristika borbi ispravno identificirane. Anaklynov život ovisi o poznavanju ovih tipova bitaka, stoga se maksimalni broj bodova za ovaj podzadatak dodjeljuje samo ako je dobivena vrijednost metrike evaluacije >= 0.95.
Koristeći skup podataka koji opisuje pojedinačne borbe između Jedija i Calmtroopera, izgradi klasifikacijski model koji će predvidjeti ishod borbe za svaki redak u test.csv.
Ciljna varijabla je: winner (0 - pobjeđuje Calmtrooper / 1 - pobjeđuje Jedi).
Evaluacija se vrši pomoću F1 macro rezultata.
F1 macro rezultat izračunava se na sljedeći način:
Ova metrika tretira obje klase jednako i kažnjava modele koji ispravno predviđaju samo većinsku klasu.
Pragovi evaluacije:
Konačno rješenje mora biti CSV datoteka nazvana submission.csv koja sadrži točno 3 stupca:
subtaskID - broj podzadatka (1, 2, 3, 4)datapointID - ID svake borbeanswer - odgovarajući odgovor za taj podzadatak i datapointIDNapomena: Za Podzadatke 1 i 2, koji zahtijevaju jedan odgovor, ispisuje se samo jedan redak za svaki podzadatak, s datapointID jednakim 1, odnosno 2.