升级RAM后的tensoflow培训出错

时间:2017-12-27 10:44:19

标签: tensorflow deep-learning

我之前尝试使用4gb ram和GTX 1050ti训练自定义物体探测器,即使它非常慢,它也可以毫无错误地运行。现在我升级到了8gb,我现在遇到了这个错误。

  

2017-12-27 18:21:27.928811:E   tensorflow / stream_executor / cuda / cuda_event.cc:49]错误轮询   事件状态:无法查询事件:CUDA_ERROR_ILLEGAL_ADDRESS   2017-12-27 18:21:27.928841:F   tensorflow / core / common_runtime / gpu / gpu_event_mgr.cc:203]意外   事件状态:1已中止(核心转储)

第一次尝试后重新训练训练脚本:

  

2017-12-27 18:35:26.519028:E   tensorflow / stream_executor / cuda / cuda_gpu_executor.cc:638]未能   记录完成事件;因此,未能创建流间   依赖2017-12-27 18:35:26.519053:我   tensorflow / stream_executor / stream.cc:4624]流0xc757670没有   memcpy device-to-host;来源:0x10208489d00 2017-12-27   18:35:26.519064:E tensorflow / stream_executor / stream.cc:306]错误   在流中记录事件:错误记录流上的CUDA事件   0x1201fa60:CUDA_ERROR_LAUNCH_FAILED;没有将流标记为坏,如   Event对象可能有错。监控进一步的错误。   2017-12-27 18:35:26.519076:E   tensorflow / stream_executor / cuda / cuda_event.cc:49]错误轮询   事件状态:无法查询事件:CUDA_ERROR_LAUNCH_FAILED   2017-12-27 18:35:26.519084:F   tensorflow / core / common_runtime / gpu / gpu_event_mgr.cc:203]意外   事件状态:1已中止(核心转储)

0 个答案:

没有答案