Foros del web, para los que viven de bits

Tengo que hacer un programa que al introducirle cualquier URL, este primero la convierta a texto para luego halar este archivo de texto y poder separar todas las palabras que contiene esta URL, luego crear un arbol binario con todas las palabras de la URL y por ultimo crear un indice indicando cuantas veces se repite cada palabra en esa URL...debe funcionar con cualquier URL y el codigo dede ser en C#...

Muchas Gracias por su ayuda.

quieres analizar el contenido de la pagina dado el url q le pases aja

puedes hacer algo asi

System.Net.WebClient cliente = new System.Net.WebClient();
string datos=System.Text.Encoding.ASCII.GetString(cliente .DownloadData(url));

y para analizar solo tendrias revisar datos en base a tus reglas de busqueda