Ola amigo, tenho esta mesma configuração.
Meu Overclock esta a 4,4ghz-VCore 1375.
minha Mb nao tem opção de offset, porém deixe apenas com 0,100+.
Aqui uso o Cool'n Quiet.
Tenta manter a Velocidade do HT a 2600Mhz e do NorthBridge a 2600mhz TMB!! - isso aqui no meu caso que fez realmente muita diferença na performance, pois melhora a velocidade de comunicação do processador aos demais componentes diminuindo o gargalo. porém aqui so cheguei a 2400Mhz.
Da pra obter 4,0Ghz tranquilo sem mexer na tensão.
Esta nossa placa de video é muito limitada por causa da pouca VRam. as vezes os Sttutering são causados por ela.
Lembrando que, cada caso é um caso, testa aos poucos, para ver seus limites. E tenha um bom sistema de resfriamento.