Прикупил еще один GPU, gtx1070 и столкнулся со странным поведением DIGITS.
Обе карты обе карты видятся на обеих все запускается без ошибок драйвер 367-й, cuda 8.0, cudnn-v5, ubuntu 14.04 LTS.
Но на одной сеть учится, на другой нет.
На gtx970
На gtx1070
Кто нибудь сталкивался с подобным ?
UPD: Перестроил caffe со включенным NCCL вроде теперь учится. Но странно все это...