Tensorflow: CUDA_ERROR_INVALID_HANDLE

这两天一直被下面的一个问题摧残:


2019-11-27 00:59:20.503198: E tensorflow/stream_executor/stream.cc:331] Error recording event in stream: error recording CUDA event on stream 0x26abfb0: CUDA_ERROR_INVALID_HANDLE: invalid resource handle; not marking stream as bad, as the Event object may be at fault. Monitor for further errors.

网上寻觅半天,无论是百度和Google上面对于这类问题是少之又少,主要是LZ在做tensorflow的c++ inference的时候出现的上述问题,而且代码在CPU上可以完美运行,但是GPU上,可以inference,得到的结果很随机。

通常情况下如果是相同的输入,inference的结果基本上是相同的,不会有变化的。

最后找到原因在于LZ在使用tensorflow之前用了另外一个使用gpu加速的算法,在初始化时先初始化了调用tensorflow接口的深度学习算法,然后又初始化了另外一个cuda底层算法,毕竟自己的算法没有tensorflow那样能够很好的维护内存,就出现了上述的错误,结果两个算法调整下初始化的顺序,错误就解决了。整整折腾了两天时间。。。

PS:感谢我表姐一直帮忙找错误O(∩_∩)O最近降温了,小伙伴要多穿点衣服!

发布了300 篇原创文章 · 获赞 203 · 访问量 59万+

猜你喜欢

转载自blog.csdn.net/Felaim/article/details/103281295