He tenido el mismo problema con una web donde publicaban unos datos que necesitaba cojer y la misma tiene login asi que luego de acceder uno es redirigido a un controller/action determinado ... por ejemplo a la home ... asi que uno debe poder "navegar" hasta la parte (pagina o controller/action) donde esta lo que uno desea parsear.
Quedo suscripto a ver si el compañero resuelve pues sabre resuelve tambien mi problema