请问TensorFlow的同步训练与异步训练

来源:5-3 多环境与集群支持

追梦逐梦白日做梦

2017-11-20

同步训练和异步训练的应用场景有什么区别?

异步训练最后的模型是怎么确定的,如果是在多台服务器训练的话,异步最后每台得到的模型参数应该都不一样吧。

还有同步训练也是,怎么确定最后的模型。

写回答

1回答

卫峥

2017-11-21

你可能没理解, 模型和参数。 

模型就是你训练的网络结构,参数是模型里面的W和B,不管怎么样做,你每次训练出来的参数都不会一样。 

至于同步和异步的问题,你应该是没搞懂tensorflow这个框架  建议可以阅读以下tensorflow的官方文档 全部仔细阅读一遍。

0
0

深度学习之神经网络核心原理与算法

神经网络实现/Tensorflow框架/图片分类实现

474 学习 · 69 问题

查看课程