Olá, estou com o mesmo problema que o seu. E pasme, uso a RX 6600 8GB da ASUS.
O problema é a placa de vídeo mesmo com os drivers da AMD.
O primeiro mapa carrega em torno de 15 segundos, ai quando vou carregar um mapa diferente ele trava no carregamento por uns 4 minutos!
Se eu começar jogando na Mirage e no segundo mapa for pra Inferno ele trava por 4 minutos.
Não é SSD nem processador, o problema é a placa de vídeo. Eu fiz um teste usando meu processador que eu tinha que tinha graphics. Tirei a placa de vídeo e sem ela o jogo carregou normal, todos mapas em 15 segundos sem travar. Coloquei a placa de vídeo e travou novamente no mesmo problema.
Apenas uma vez de 1 ano com a placa de vídeo que eu atualizei o driver e ficou normal carregando todos mapas em 15 segundos. só que perdi 150fps de performasse no CSGO.
Achei que tinha resolvido e quando lançou outro driver eu atualizei e voltou o problema novamente.