P8 2-1 framework of ML
MODEL BIAS:
the model is too simple 模型太过简单
optimization issue：
model包含了
θ
theta
θ *,但是optimization并没有找到最好的
θ
theta
θ *
从training data可以看出20层的loss要低于56层的loss。这就是optimization issue，表示没有找到最优的
θ
theta
θ *。
overfitting问题
solution：more training datadata augmentation
constrained model
bias-complexity trade-off
