Это проблема чисто компилятора. Или компилятор старый, или ключи компиляции какие-то, например -flto. Для компиляции с LLVM(clang) нужен LLVM желательно 11-12 версии. У меня LLVM 11.1.0 версии, но он не поддерживает нормально еще ryzen 9 и выдает код медленнее gcc 10.2.0, поэтому собираю на gcc 10.2.0. С gcc 10.2.0 все нормально, и с llvm 11.1.0 тоже, правда с LLVM у меня ядро медленее и приложения по бенчмарку тоже. Правда вышел уже llvm 12, но у меня он не собирается даже с патчами и несколько тестов не проходит при компиляции, поэтому пока на 12 llvm не тестировал производительность кода на ryzen.