Tenho o mesmo "problema" com minha 1660 SUPER OC Gigabyte.
o que acontece é que a temperatura para acionamento dos fans está definida por padrão para 50C e aqui em meu gabinete esta já é uma temperatura estável. Então atinge 50C, os fans acionam, a temperatura diminui devido ao resfriamento, fans desligam, temperatura volta a aumentar, fans ligam e assim por diante... Cada vez que os fans acionam faz sim um barulho semelhante ao seu, mas isto é perfeitamente normal pois trata-se de um componente mecânico sendo acionado.
Após pesquisar muito vi que isto acontece com a grande maioria das placas desta nova geração (principalmente as RTX 2060 e 2070).
No entanto, isto foi simplesmente resolvido adotando uma nova curva de fan no msi. Ao invés de acionarem nos 50C coloquei para ser acionado nos 40C, sendo assim, dificilmente a temperatura cai para menos que isto e evita o desligamento constante dos fans.