В чем проблема? Звук не прерывается, не кашляет - значит можно попробовать занизить задержку(или буфер, что где), иначе надо повышать. Более высокая частота сэмплинга дополнительно понижает задержку, но на качестве работы сказывается негативно только при перегрузке процессора.