博客
关于我
Tensorboard使用入门,用于可视化loss,accuracy等数据
阅读量:237 次
发布时间:2019-03-01

本文共 909 字,大约阅读时间需要 3 分钟。

MNIST分类模型代码优化解析

代码概述:本代码基于TensorFlow框架,实现了MNIST数字分类模型,采用梯度下降法进行训练,并通过TensorBoard进行可视化监控。以下为代码详细解析。

数据载入:使用input_data模块读取MNIST数据集,设置one_hot=True参数,返回处理后的训练集、验证集和测试集。

变量摘要:创建了variable_summary函数,用于定义变量摘要,包含均值、标准差、最大值、最小值以及直方图。该函数在TensorBoard中可视化这些统计数据。

输入层:定义了x和y两个placeholder,分别用于输入训练数据和标签。x的尺寸为[None, 784],y的尺寸为[None, 10]。

神经网络结构:在layer命名空间内,定义了权重W和偏置b。W的尺寸为[784, 10],b的尺寸为[10]。使用variable_summary函数对权重和偏置进行了摘要。

输出层:通过矩阵乘法和加法运算实现神经网络输出,使用softmax函数进行归一化。

损失函数:采用二次代价函数,定义为均方误差,用于衡量预测值与实际值的差异。

训练过程:使用梯度下降法优化模型参数,设置学习率为0.2。定义了train_step变量,负责执行一次训练步骤。

准确率计算:计算正确预测的布尔型列表,转换为浮点数后求均值得到准确率。

TensorBoard监控:定义了多个标量摘要,包括权重均值、标准差、最大值、最小值、直方图、损失值和准确率。通过merged变量将所有摘要合并,方便 TensorBoard 采集。

训练过程:初始化变量后,进入训练循环。每个epoch内遍历所有批次,使用next_batch获取训练数据。每批数据执行一次训练步骤,并运行所有摘要和损失函数。

结果记录:使用TensorBoard FileWriter将训练摘要写入日志文件,并同时测试模型准确率。

测试准确率:在每个epoch结束后,使用测试数据集计算模型准确率,输出结果。

通过以上优化,代码结构清晰,注释详尽,便于理解和维护。同时,TensorBoard的使用使得训练过程可视化,便于监控和调试。

转载地址:http://pihv.baihongyu.com/

你可能感兴趣的文章
python 存入数据库bigint_python基础_MySQL的bigint类型
查看>>
python 学习 面向对象编程
查看>>
Python 学习日记第三篇 -- 字典
查看>>
Python 学习笔记(一)Data type
查看>>
python 安装echarts
查看>>
python 安装opencv及问题解决
查看>>
Python 安装程序:“写入文件 C:\Python27\pythonw.exe 时出错“
查看>>
Python 安装避坑指南:从入门到进阶
查看>>
Python 安装配置详解
查看>>
python 实现儿童算术游戏
查看>>
python 实现字符串转整型
查看>>
Python 实现定时任务的八种方案!
查看>>
Python 实现自动化测试 dubbo 协议接口
查看>>
python 对json数据读取及保存与读取,对dump,dumps,load,loads的理解
查看>>
Python 对mysql数据库的操作
查看>>
Python 对象数据库列表
查看>>
Python 导入requests报错No module named requests
查看>>
python 将函数加到列表中进行调用
查看>>
python 将图片与字符串相互转换
查看>>
Python 嵌套字典全面指南
查看>>