dnn訓(xùn)練可視化

基礎(chǔ)可視化指標(biāo)
1、train loss的變化曲線（可包含batch更新前后的loss分別曲線）
2、test loss的變化曲線
3、學(xué)習(xí)率，梯度的變化曲線（分batch，分參數(shù)計(jì)算其梯度值，以及學(xué)習(xí)率*梯度值分布）
4、test，train中一些case的打印
5、單參數(shù)的分布顯示（對應(yīng)embedding參數(shù)，顯示其降緯后的可視化分布<t_SNE>，如果是高層的embedding表示，還需要通過輸入case，前向計(jì)算其結(jié)果再輸出可視化分布）

6.http://playground.tensorflow.org/#activation=tanh&batchSize=10&dataset=circle&regDataset=reg-plane&learningRate=0.03&regularizationRate=0&noise=0&networkShape=4,2&seed=0.46767&showTestData=false&discretize=false&percTrainData=50&x=true&y=true&xTimesY=false&xSquared=false&ySquared=false&cosX=false&sinX=false&cosY=false&sinY=false&collectStats=false&problem=classification&initZero=false&hideText=false