Que archivos dejar en servidor para el robot google?

[buscand]

Hola,soy novato en esto de SEO y seguridad en internet y tengo mis dudas que apreciaria pudieran quitarme y a los que leeran este post en lo adelante.

Tengo una web. En mi servidor tengo el home/, el public_html, y el www/
Tengo la web puesta tanto en el public como en www, aparte de la web para pruebas en el public. Ademas de tener archivos de copias de ddbb/ seguridad.
Mi pregunta es: Que archivos de mi web debo dejar para que el robot de google indexe y cuales no?
En que directorio concreto entra google para buscar la web?
(www/ ); (public_html;) (home/ )???
Como puedo proteger mi base de datos del robot?
Pregunto esto porque no se como debo asegurar archivos importantes de la web para que el robot no los indexe y pueda en un futuro poner en peligro mi web.


Muchisimas gracias.