Aquí te explica cómo hacerlo:
http://www.htmlweb.net/diseno/favicon/favicon.html
Para crear el ícono o convertir una imagen cualquiera a punto-ico, te recomiendo el programa Click, que podés descargarlo gratuitamente de:
http://www.blaiz.net/
Saludos