[NEINR] O predmetu
prodanacro
Atem Ovaj tjedan (zadnji komentar na predavanju na teamsu: Rok je standardni - do početka sljedećeg predavanja.)
prodanacro
M̵̧̩͑̀͝î̶͍̉ć̴̝̾́̀o̶̺̟̣͂̽ nije li par minuta malo puno za ovakav problem? kakvu arhitekturu mreže si imao / do koje greške si išao / koliko iteracija i koliko uzoraka?
micho
oat 40 × 45 × 5, išao sam dok se greška ne prestane smanjivati ili do 1000 epoha. Learning rate mi je bio schedulan, Reduce LR on Plateau, s faktorom 0.7 ak se ne varam, i pretpostavljan da je početni bio 3e-4
.
Možda je bilo i manje od par minuta, možda tipa 30 s, trebalo bi istestirati, i svakako ovisi o metodi (GD je trebao oko 120 epoha, SGD oko 700-800 ak se dobro sjećam, to je dost velika razlika). S tim da moje epohe su veće kad sam si napravio duplo veći dataset. I upitno je koliko sam optimalno ovo implementirao kad mi je to bio 1. doticaj s numpyjem i nisam pazio na implementaciju.
A iz iskustva znam reći da cifre od par minuta definitivno nisu previše za treniranje na čipu, pogotovo ne na tadašnjem i3-2120m kojeg sam imao. Za MNIST ti treba taj red veličine vremena na čipu, a MNIST je daleko teži zadatak od ovog za jednoslojnu mrežu bez augmentacije i normalizacije.
For reference pričam o zadatku s gestama, ovo sa sinusima nemam pojma, ne sjećam se uopće da sam to radio.
Bottom line
Python definitivno nije nešto što sputava Numpy koji je pretežito napisan u Cythonu, C-u i Asembleru.
prodanacro
M̵̧̩͑̀͝î̶͍̉ć̴̝̾́̀o̶̺̟̣͂̽
Pa, meni se činilo dosta dugo jer se meni dataset istrenira praktički odmah (manje od sekunde) za arhitekturu 60×45×5 (100 uzoraka, 1000 epoha, batch size = 10) korištenjem eigena, također za zadatak s gestama 🤨
carrieb
kakve i kada su nadoknade? su odma sljedeci tjedan ili na kraju semestra?
[obrisani korisnik]
carrieb samo ovo je napisao
Jel zadao opet danas zadacu?
in1
[obrisani korisnik]
in1 Boze sacuvaj
micho
oat Pokrenuo sam ono što sam bio stavio na Git
znači to je uz moju mim implementaciju koja olako shvaća spremanje i dohvaćanje memorije i sa tisuće ukrasa. Problem kod numpyja će svakom korisniku biti što za matmul
koristi einsum
, što se može redirectati na BLASove funkcije ako je nekom bitno da je brže. Meni to nije bilo bitno, a i mislim da sam koristio dot
koji bi trebao zvati pravi matmul
. Nemam pojma, nisam benchmarkao haha
masha
Jel bi mi netko mogao poslati snimak proslog predavanja (neuro-fuzzy sustavi) 🙏🏻
carrieb
masha i meni molim vasss
sphera
masha
meni isto plsssssss
koode7
jel ima tko snimke starih predavanja?
johndoe
ekipa, jel moze netko TLDR ovog predmeta i breakdown koliko bodova nosi sta? upisan sam na faks tek krajem 11 mjeseca ali sam iz osobnih razloga izbjegavao ovaj predmet u sirokom luku, a vidim da netko pise da su one tjedne zadace obavezne? vidim isto tako da se negdje referira “labosi”, negdje “zadace”… s obzirom da je jedini materijal na webu cupiceva knjiga, jel moze netko breakdownat sta je obavezno, koja je razlika izmedu labosa i zadaca, jel ima neki “krajnji rok” (ili mi je prosao voz), koliko labosi/zadace nose bodova, jel rok ima usmeni?
Emma63194
johndoe Zadaća == labos. Nema praga na njima, ali ih sve (da, svih 7) moraš predati prije ZI nekada (objavit će točno termin kada) i moraju biti prihvaćene. Kad ih naknadno predaješ, odgovaraš za nula bodova, osim jedne, nju možeš odgovarati za 50% (ili ti, manje od 1.5 bod). Ako ideš na rok, zadaće su ti nula bodova (ali moraju sve biti prihvaćene da bi mogao ići na rok) i imaš pismeni koji nosi 50b i usmeni koji isto nosi 50b.
Inače, na kont. nastavi zadaće nose 20b, a MI i ZI svaki po 40b.
TL;DR: Nije još gotovo, možeš predati sve zadaće naknadno i proći predmet na roku.
johndoe
Emma63194 Tenks puno 😃 znaci svaka od tih zadaca svaki tjedan se mora odgovarat? Cupic stvarno nema pametnijeg posla? Jel znas hoce ih biti jos ili?
in1
johndoe Svaka zadaća se mora odgovarati & ako se ne varam svaki tjedan do sada je bila zadaća osim tijekom MI-jeva
Emma63194
johndoe Yup, svaku moramo odgovarati, ali nije nas pitao svaki tjedan, već jedan termin pred MI i jedan pred ZI će biti. Na nadoknadi odgovaraš sve odjednom.
koode7
jos jednom.. jel ima netko snimke starih predavanja? 🙁
Dekan
Jel Cupic rekao kad je rok za naknadnu predaju? I jeli itko skuzio gdje bi trebali predat nadoknadu zadace?
Radi se o 6. dz
micho
Dekan To ti bude uvijek na kraju, i mislim da ti otvori na ferku da možeš predati
Međutim, konkretno ja sam 6. i 7. zadaću predavao kasno (mislim da sam 1 dan zakasnio), i uspio sam je predati nakon roka na Ferku, rekao sam to asistentu na kolokviju i on je rekao “dobro kolega ali onda vam se bodovi prepolavljaju”.