Si, claro, con overclock se calentaría más, pero de todas formas las temperaturas que tienes no son para nada preocupantes. A partir de 60º ya empiezan a ser temperaturas "no recomendables", pero por lo que me dices puedes usarlo sin ningún miedo.
De todas formas, si tuvieras problemas de temperatura la solución sería mejorar la refrigeración, empezando por un disipador del procesador de calidad, porque imagino que estás con el stock de intel. Quiero decir, que si se calentase, la solución es poner refrigeración de calidad, no cambiar el ordenador xD.
Un saludo