perdón, pues entendí mal.
¿cargas el picturebox direcmente de la url de la foto?
en el caso que así sea, porque no pruebas de cargar la imagen así:
Cita: Dim miImagen As New Bitmap(OpenFileDialog1.FileName)
PictureBox1.Image = miImagen
Luego para liberar el PictureBox:
Cita: PictureBox1.Image.Dispose()
pictureBox1.Image = Nothing
Entonces ya puedes borrar la foto
.......
saludos