Para un principiante, posiblemente sea mejor instalar Apache + PHP + MySQL con alguno de los muchos instaladores que existen. Sobre todo porque el instalarlos uno a uno puede no ser tan sencillo como parece, sobre todo si el Apache que has instalado es la versión 2, que no resulta facÃ_l de hacer funcionar con PHP.
Instaladores:
FoxServ :
http://www.foxserv.net
PHP Triad:
http://sourceforge.net/projects/phptriad
Un saludo