No sé donde leistes .. pero hay un método para definir el lenguaje que quieres usar:
Código PHP:
// To load the Portuguese version
$mail->SetLanguage("br", "/optional/path/to/language/directory/");
(lo dice en la página de inicio incluso .. y en la descripción de los métodos)
Un saludo,