Tensorflow 合并通道及加载子模型的方法
最近在使用Tensorflow 实现DNN网络时，遇到一些问题。目前网上关于Tensorflow的资料还比较少，现把问题和解决方法写出来，仅供参考。
（1）将两个子模型的输出合并到一个通道，例如同时连接到一个全连接层如图
合并方法为 tf.concat()函数。此函数需要两个个参数 concat（0或1，[合并节点1，合并节点2] ）。0 或 1 代表节点合并的方式：0 代表合并后列相同，行增加；1 代表合并后行相同，列增加。
上图所示合并方法为： X_20 = tf.concat(1, [X_top, X_down]);
（2）加载预训练好模型的部分参数。例如训练完成了一个五层网络，现在需要训练好一个七层网络，使用已训练好的五层网络参数初始化七层网络的前五层。
首先，五层网络保存模型时的参数变量名要和七层网络的需要初始化的参数变量名保持一致。
然后，定义加载指定变量名的 tf.train.Saver()。
例如：
Saver在restore模型时就会只加载 W_fc1_I, W_fc2_I, b_fc1_I, b_fc2_I 这四个参数，并且初始化当前模型中变量名相同的变量。需要注意的是，其他参数也是需要初始化的，一种避免遗漏初始化变量的方法是首先使用 initialize_all_variables() 函数对所有参数进行初始化之后再调用 restore 函数初始化需要的部分参数。
此方法只是其中一种解决方法，仅供参考。
以上这篇Tensorflow 合并通道及加载子模型的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
这篇文章主要为大家详细介绍了python实现单链表中删除倒数第K个节点的方法，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-09-09
这篇文章主要介绍了使用OpenCV去除面积较小的连通域，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-07-07
PyCharm 配置远程python解释器和在本地修改服务器代码
这篇文章主要介绍了PyCharm 配置远程python解释器和在本地修改服务器代码，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2019-07-07
这篇文章主要介绍了python 如何删除系统中的文件,分别按时间，大小，扩展名删除，满足不同需求，感兴趣的朋友可以了解下2020-11-11
本篇文章给大家介绍了python中的字典，包括字典的操作，字典函数实现代码，需要的朋友参考下吧2018-01-01
这篇文章主要为大家详细介绍了python3利用tcp实现文件夹远程传输，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-07-07
我们都知道在使用pandas处理数据的时候,往往会需要合并两个或者多个DataFrame的操作,下面这篇文章主要给大家介绍了关于Python pandas DataFrame数据拼接方法的相关资料,需要的朋友可以参考下2022-07-07
基于本地知识的问答机器人langchain-ChatGLM 大语言模型实现方法详解
这篇文章主要介绍了基于本地知识的问答机器人langchain-ChatGLM 大语言模型实现方法,结合具体实例形式详细分析了langchain-ChatGLM的功能、原理、部署方法与操作注意事项,需要的朋友可以参考下2023-07-07
在本篇文章中小编给大家分享的是关于Python将string转换到float的实例方法以及相关知识点，需要的朋友们参考下。2019-07-07
这篇文章主要介绍了Linux 修改Python命令的方法示例，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-12-12
最新评论