this dir | view | cards | source | edit | dark
top
- poznámky
- bacha na čísla verzí u Pythonu a balíčků
- používat pole v numpy
- lineární regrese
- dvě možnosti
- explicitní
- pozitiva: přesnost
- negativa: outliers dělají problémy
- SGD
- pozitiva: méně paměti, regularizace
- negativa: globální optimum nezaručeno
- SGD + momentum
- AdaGrad
- AdaDelta
- Adaptive Moment Estimation (ADAM)
- co máme
- data (x,y)∈R2
- model f(x)=y,f:R→R
- při lineární regresi konkrétně y=ax+b
- parametry θ=(a,b)∈R2
- predikce fθ(x)=y,f:R3→R
- loss L(θ,(x,y)),L:R4→R