Hola
albertoshu:
Lo primero decirte que ninguna pregunta es tonta, solo es tonto el que no pregunta...
Lo segundo aclararte que php y html son cosas distintas, pero absolutamente complementarias. Mientras php es un lenguaje de programacion que te permite la creacion de paginas dinamicas, esto quiere decir que hay mas interaccion entre el servidor y el cliente, en tanto html solo en un lenguaje de etiquetas y estatico.
Sobre la extension de tus archivos solo es estrictamente necesario colocar extension php a un archivo que contenga sentencias en este lenguaje y que empieze con <?php y termine en ?>
Cuando no tengas nada de php en tus paginas puedes hacerlas de extension html o htm ...
Espero haberte orientado
Saludos.
PD. Lee
este articulo.