Ese precisamente es el comportamiento por defecto de los navegadores, si, imagínate, bajas una pagina con el scroll hasta la linea 200 y ahí hay un enlace que te lleva a otra página, luego en la otra página si clicas en el botón 'atrás' del navegador te lleva a la parte de la página anterior desde donde saliste de ella, es decir, la linea 200. Si quieres poner un botón 'atrás' en tu web que funcione como el del navegador se que se puede hacer con JS y creo que es algo parecido a esto:
<a href="javascript
:history.go(-1)">Atrás</a>
Salud!