Sería algo como esto:
Código httaccess:
Ver originalOptions +FollowSymLinks
RewriteEngine On
RewriteRule ^(.*).html$ $1.php [L]
Lo de la macro con notepad , es grabar una serie de instrucciones que puedes aplicar en un documento.
Te recomiendo que te pases ahora a PHP, aunque no uses nada de programación complicada, por que si empiezas a subir de posiciones y luego te cambias a PHP va a ser un dolor de cabeza mayor que si lo haces ahora que empiezas.