Es muy difícil saber exactamente la causa si no se ha echo ninguna modificación en el sitio, algún cambio de hosting, etc.
Los intercambios tampoco son tan alejados de la temática de tu sitio, más bien creo que fueron bastante acertados
Seguramente sea algo temporal y no hay que preocuparse, aunque tal vez sería interesante chequear si la competencia está trabajando para mejorar los resultados.