Vessasymbolien sovittaminen

Käymälöiden piktogrammien yhdistäminen

Ongelman kuvaus

Tämä tehtävä keskittyy mallin kouluttamiseen oppimaan suhde saman käymälän miesten ja naisten piktogrammien välillä. Merkittyjen harjoitusdatojen perusteella sinun tulee kouluttaa yhdistämismalli, joka annetun kyselyikuvan perusteella löytää eri sukupuolen vastineen (esimerkiksi yhdistää miespiktogrammin leikatusta kuvasta naispuoliseen vastineeseen alkuperäisestä kuvasta), rajoituksena että molemmat piktogrammit ovat samasta käymälästä.

Esimerkiksi alla olevassa kuvassa 1 esitetylle kyselykuvalle (eli miespiktogrammi leikatussa kuvassa) sen vastaava vastine on esitetty kuvassa 2 (eli naispiktogrammi alkuperäisessä kuvassa, joka on samasta käymälästä).

Kuva 1	Kuva 2

Datasetti

Harjoitussetti

Tätä datasettia voidaan käyttää mallin kouluttamiseen. Hakemistorakenne:

1train/ 2├── crop/ # Leikatut piktogrammit 3│ ├── female/ 1.png, 2.png, ... 4│ └── male/ 5└── orig/ # Alkuperäiset piktogrammit6    ├── female/7    └── male/

Jokainen alikansio sisältää piktogrammeja nimeltään 1.png - 82.png, missä numero ilmaisee käymälän ID:n. Jokaiselle käymälälle on neljä kuvaa (huomaa, että neljä kuvaa samasta käymälästä tulee olemaan sama yksilöllinen ID kaikissa neljässä alikansiossa):

• crop/female/i.png → Leikattu naispiktogrammi
• crop/male/i.png → Leikattu miespiktogrammi
• orig/female/i.png → Alkuperäinen naispiktogrammi
• orig/male/i.png → Alkuperäinen miespiktogrammi

Validointi- ja testisetti

Validointisetti (validation_set) ja testisetti (test_set) sisältävät kaksi alikansiota seuraavalla rakenteella:

1validation_set/2├── query/ # Leikatut piktogrammit jotka yhdistetään 3└── gallery/ # Alkuperäiset ehdokaspiktogrammit

1test_set/ 2├── query/ # Leikatut piktogrammit jotka yhdistetään 3└── gallery/ # Alkuperäiset ehdokaspiktogrammit

missä

• query/ - leikatut piktogrammit jotka tulee yhdistää;
• gallery/ - alkuperäisten piktogrammien joukko joista yhdistetään;
• Kaikki kuvat ovat .png-muodossa.
• Validointisetti sisältää 10 kuvaa query/-kansiossa, ja testisetti sisältää 30 kuvaa query/-kansiossaan.

Huomautukset:

• Toisin kuin harjoitussetin ehdotettu jako, query/- ja gallery/-kansioiden tiedostonimet on numeroitu ja sekoitettu itsenäisesti, mikä tarkoittaa että yhdistäminen ei voi perustua ID:hin.
• Jokaiselle leikatulle piktogrammille query/-kansiossa on täsmälleen kaksi alkuperäistä gallery/-kansiossa (mies, nainen samasta käymälästä), mikä tarkoittaa että len(gallery)=2*len(query).

Tehtävä

Jokaiselle kuvalle query/-kansiossa, ennusta kuva gallery/-kansiosta joka:

• On vastakkaista sukupuolta ja tulee samasta käymälästä.

Tämä yhdistäminen tulisi toteuttaa käyttäen koulutettua mallia.

Palautustiedosto

Sinun tulee luoda submission.csv-tiedosto joka sisältää seuraavat:

1image_path, label2dataset/validation_set/query/1.png, 73dataset/test_set/query/1.png, 24...

missä:

• image_path on polku query/-kuvan jota ennustetaan (otettu test.csv-tiedostosta)
• label on numero jonka sisältää otsikossaan gallery/-kuva joka yhdistyy query/-kuvan kanssa.

Pisteet

Arviointimetriikka on luokittelutarkkuus, määritelty oikein ennustettujen näytteiden suhteena arvioidun näytteiden kokonaismäärään.

Lopullinen pistemäärä lasketaan saavutetun tarkkuuden perusteella käyttäen seuraavia sääntöjä:

• accuracy ≥ 0.9 → 100 pistettä
• accuracy ≤ 0.5 → 0 pistettä
• Väliarvoille myönnetään suhteellinen pistemäärä 0 ja 100 väliltä.