Hace poco me encontre con la existencia de un lenguaje de programacion exclusivo para temas de audio:
http://chuck.cs.princeton.edu/

Pero si lo que buscas son librerias de C puedes usar la archiconocida SDL:

http://www.libsdl.org/