En cuanto al audio puedes venirte a
http://flash-mp3-player.net/players/multi/generator/ y desde aqui generar tus propias listas, luego te dan un codigo html lo metes en tu web y listo, o puedes hacerlo manualmente, aqui explican como:
http://www.colewebs.org/spip.php?article24
En cuanto a los videos puedes ir a
http://flv-player.net/players/multi/generator/ y aqui generar tus listas de videos, luego te dan el codigo, lo incluyes y listo. En las paginas de los generadores tambien puedes elegir otros reproductores. Espero servir, Saludos!