Как посчитать кол-во вычислекний в caffe модели?

[mrgloom 242]

Как посчитать кол-во вычислекний в caffe модели которое требуется для прямого и обратного прохода?

По идее это можно будет вычислять "статически" для каждого типа слоя имея параметры слоя?

Адекватно ли будет потом сравнивать, что например такая то видеокарта на такой то модели сделала столько то вычислений во флопсах, а такая то столько.

 

Есть идея сделать аналог распределенного рендеринга (вот описание идеи распределенного рендеринга) только для обучения сетей.

Это может быть полезно для обучения разных сетей для одной и той же задачи, для обучения одних и тех же сетей только с разными параметрами, а так же для обучения одних и тех же сетей на разных данных для энсэмблинга.

а может такое уже что то есть?

Т.е. кол-во потраченных\использованных флопсов можно использовать как некий рейтинг на торрентах и таким образом шарить вычислительные ресурсы.