Utiliza el asistente de Google Webmsaters Tool para generar el robots.txt así te asegurarás de que no haces nada mal.
Básicamente se trata de introducir líneas del estilo "Disallow URL". Aquí tienes toda la información que necesitas:
http://support.google.com/webmasters...&answer=156449
No obstante, si realmente estás teniendo problemas con la frecuencia de visita del buscador de Google, ésto lo puedes modificar también desde el Google Webmasters Tools, en el caso de otros buscadores, tendrás que utilizar el robots.txt