Wpis z mikrobloga

Mirki #machinelearning
czy jest tu ktoś kto używa GPU #tensorflow?
Problem:
Dużo swoich modeli budowałem na CPU only ze względu na brak GPU, wreszcie dorwałem nie byle jaką grafikę, wszystko pokonfigurowałem, zainstalowałem CUDA cuDNN nccv skompilowałem tensorflow-a pod CUDA 9.2 zadowolony zapuszczam model na nowym cacuszku, łapie kartę, alokuje całą pamięć i #!$%@?, nie performuje nawet trochę lepiej niż CPU. Potrzebuje jakiś pomysłów.
log z zapinania karty do modelu:


2018-09-26 02:58:32.314184: I tensorflow/streamexecutor/cuda/cudagpuexecutor.cc:898] successful NUMA node read from SysFS had negative value (-1), but there must be at least one NUMA node, so returning NUMA node zero
2018-09-26 02:58:32.315021: I tensorflow/core/common
runtime/gpu/gpudevice.cc:1356] Found device 0 with properties:
name: Tesla V100-PCIE-32GB major: 7 minor: 0 memoryClockRate(GHz): 1.38
pciBusID: 0000:0b:00.0
totalMemory: 31.75GiB freeMemory: 31.34GiB
2018-09-26 02:58:32.315055: I tensorflow/core/common
runtime/gpu/gpudevice.cc:1435] Adding visible gpu devices: 0
2018-09-26 02:58:32.690236: I tensorflow/core/common
runtime/gpu/gpudevice.cc:923] Device interconnect StreamExecutor with strength 1 edge matrix:
2018-09-26 02:58:32.690290: I tensorflow/core/common
runtime/gpu/gpudevice.cc:929] 0
2018-09-26 02:58:32.690305: I tensorflow/core/common
runtime/gpu/gpudevice.cc:942] 0: N
2018-09-26 02:58:32.691041: I tensorflow/core/common
runtime/gpu/gpu_device.cc:1053] Created TensorFlow device (/job:localhost/replica:0/task:0/device:GPU:0 with 30419 MB memory) -> physical GPU (device: 0, name: Tesla V100-PCIE-32GB, pci bus id: 0000:0b:00.0, compute capability: 7.0)
  • 2