No, PHP Mailer ni ninguna classe se ha de configurar en tu php.ini (salvo PEAR pero eso es otra cosa)
Sólo tienes que usarla como los ejemplos de la documentación describe:
Código PHP:
<?
include("class.phpmailer.php");
//y resto de uso de dicha classe.
Un saludo,