Надоело думать и искать что тормозит рендер, а все профайлеры, которые я видел, работают во вьюпорте, но не в рендере. Пришлось замутить еще и аддон с профайлингом сцены. Выложил в свободном доступе пока тут: https://blenderartists.org/t/render-profiler/1632393