我之前尝试使用4gb ram和GTX 1050ti训练自定义物体探测器,即使它非常慢,它也可以毫无错误地运行。现在我升级到了8gb,我现在遇到了这个错误。
2017-12-27 18:21:27.928811:E tensorflow / stream_executor / cuda / cuda_event.cc:49]错误轮询 事件状态:无法查询事件:CUDA_ERROR_ILLEGAL_ADDRESS 2017-12-27 18:21:27.928841:F tensorflow / core / common_runtime / gpu / gpu_event_mgr.cc:203]意外 事件状态:1已中止(核心转储)
第一次尝试后重新训练训练脚本:
2017-12-27 18:35:26.519028:E tensorflow / stream_executor / cuda / cuda_gpu_executor.cc:638]未能 记录完成事件;因此,未能创建流间 依赖2017-12-27 18:35:26.519053:我 tensorflow / stream_executor / stream.cc:4624]流0xc757670没有 memcpy device-to-host;来源:0x10208489d00 2017-12-27 18:35:26.519064:E tensorflow / stream_executor / stream.cc:306]错误 在流中记录事件:错误记录流上的CUDA事件 0x1201fa60:CUDA_ERROR_LAUNCH_FAILED;没有将流标记为坏,如 Event对象可能有错。监控进一步的错误。 2017-12-27 18:35:26.519076:E tensorflow / stream_executor / cuda / cuda_event.cc:49]错误轮询 事件状态:无法查询事件:CUDA_ERROR_LAUNCH_FAILED 2017-12-27 18:35:26.519084:F tensorflow / core / common_runtime / gpu / gpu_event_mgr.cc:203]意外 事件状态:1已中止(核心转储)