Cambiar paginas de .html a .php

[rex16]

Hola estoy terminando mi pagina en html y habia leido algo de los includes pero no habia intentado nunca, en este momento se me hace muy practico usarlos, sin embargo habia leido que dentro de la pagina .html se podia insertar el include, lo hice y probe en un localhost y no sirve, averigue un poco y si cambio la extension de .html a .php SI funciona, la pregunta es:
¿necesariamente debo cambiar el tipo de pagina no se puede en html? es que si lo hago, luego para editarlas se complica un poco la vista previa, ya que si no las subo o las miro con el localhost no puedo verlas, ademas de cambiar las extensiones de todas las rutas, lo que uso es:
<?php include("include.txt"); ?>

gracias