Al final lo he solucionado de la forma que comento en este
link.
La verdad es que me parece increible que siendo el Visual Basic .NET, el IIS y el ASP de Microsoft haya que liar la que he tenido que liar para que me funcionase la librería desde el servidor web.
En fin. Gracias de todas formas.
Un saludo