WordPress dispone de una actualización automática mediante el Escritorio/Dashboard. Antes de actualizar asegúrate de tener todos los plugines desactivados y de paso realiza un respaldo del sitio en cuestión por si algo sale mal.
Si quieres actualizar vía FTP, te recomiendo seguir esta guía, es muy fácil hacerlo:
http://codex.wordpress.org/Updating_...#Manual_Update
Saludos.