Как ускорить сервер на базе NGINX — Php-Fpm?
Выкинуть PHP, аудио-файл отдавать средствами Nginx.
лучше всего выкинуть PHP и аудио-файл отдавать средствами Nginx, также можно попробовать это переписать, отдавать например ссылку из php через X-Accel-Redirect