En realidad si te fijas el que te esta tomando tiempo es el render de las vistas 2010 ms antes de enviar el response, revisa todas las operaciones que tienes en la vista incluyendo la generación de formularios complejos.
Por otra parte el rendimiento real lo vas a ver ya en modo de producción cuando se compilen las vistas y actives el cache y el Opcode de php. No te puedo recomendar un libro de optimización ya que es una tarea multidisciplinaria que involucra el hardware, sistema operativo, sistemas de base de datos, aplicación y frontend. Pero te dejo una presentación que te puede ayudar con lo inmediato
http://slides.seld.be/?file=2011-10-...ymfony2.html#1