博客
关于我
Tensorboard使用入门,用于可视化loss,accuracy等数据
阅读量:237 次
发布时间:2019-03-01

本文共 909 字,大约阅读时间需要 3 分钟。

MNIST分类模型代码优化解析

代码概述:本代码基于TensorFlow框架,实现了MNIST数字分类模型,采用梯度下降法进行训练,并通过TensorBoard进行可视化监控。以下为代码详细解析。

数据载入:使用input_data模块读取MNIST数据集,设置one_hot=True参数,返回处理后的训练集、验证集和测试集。

变量摘要:创建了variable_summary函数,用于定义变量摘要,包含均值、标准差、最大值、最小值以及直方图。该函数在TensorBoard中可视化这些统计数据。

输入层:定义了x和y两个placeholder,分别用于输入训练数据和标签。x的尺寸为[None, 784],y的尺寸为[None, 10]。

神经网络结构:在layer命名空间内,定义了权重W和偏置b。W的尺寸为[784, 10],b的尺寸为[10]。使用variable_summary函数对权重和偏置进行了摘要。

输出层:通过矩阵乘法和加法运算实现神经网络输出,使用softmax函数进行归一化。

损失函数:采用二次代价函数,定义为均方误差,用于衡量预测值与实际值的差异。

训练过程:使用梯度下降法优化模型参数,设置学习率为0.2。定义了train_step变量,负责执行一次训练步骤。

准确率计算:计算正确预测的布尔型列表,转换为浮点数后求均值得到准确率。

TensorBoard监控:定义了多个标量摘要,包括权重均值、标准差、最大值、最小值、直方图、损失值和准确率。通过merged变量将所有摘要合并,方便 TensorBoard 采集。

训练过程:初始化变量后,进入训练循环。每个epoch内遍历所有批次,使用next_batch获取训练数据。每批数据执行一次训练步骤,并运行所有摘要和损失函数。

结果记录:使用TensorBoard FileWriter将训练摘要写入日志文件,并同时测试模型准确率。

测试准确率:在每个epoch结束后,使用测试数据集计算模型准确率,输出结果。

通过以上优化,代码结构清晰,注释详尽,便于理解和维护。同时,TensorBoard的使用使得训练过程可视化,便于监控和调试。

转载地址:http://pihv.baihongyu.com/

你可能感兴趣的文章
Python:如何以非阻塞方式读取子进程的标准输出
查看>>
Python:如何使用 plotly 制作阴影区域或交替背景颜色?
查看>>
Python:如何根据日期时间获取值的计数
查看>>
python:如何检测串行 COM 上的设备名称/ID
查看>>
Python:如何模拟 datetime.utcnow()?
查看>>
Python:如果DataFrames之间的其他值匹配,则对DataFrame中的值求和
查看>>
Python:字典思维
查看>>
Python:将 HEX 字符串转换为字节
查看>>
Python:将列表与范围列表合并
查看>>
Python:将列表列表初始化为一定大小,
查看>>
Python:带有生成器的给定集合的幂集
查看>>
Python:按字符的位置拆分字符串
查看>>
Python:替换嵌套字典中的值
查看>>
Python:爬取数据出现response.status_code为403解决方法
查看>>
Python:爬取数据出现response.status_code为418解决方法
查看>>
Python:生成“元组集“;来自“元组列表“;不考虑顺序
查看>>
Python:生成具有趋势的随机时间序列数据(例如周期性、指数衰减等)
查看>>
Python:用渐进式数字重命名列表中的重复项而不对列表进行排序
查看>>
Python:矩形参数无效
查看>>
Python:语法进阶
查看>>