web Crawler como hacerlo

[MaxMental]

Hola que tal ando apenas aprendiendo programacion en C#.Net y para un proyecto necesito realizar un web crawler que me permita visitar algunos sitios asi como guardar informacion de estos mi duda es si una aplicacion de este tipo se puede crear en C#:net o que tipo de lenguaje es el que requiero ya que necesito meterme mas a fondo pero quisiera una orientacion acerca de lo que devoempezar a estudiar mas que nada por que esta base de datos se usuara para crear publicidad de paginas pero automaticamente.. pero necesito que mi web crwaler las hceuqe y me arroje info acerca de ellas
Grax...