1: Конфигурация

/etc/esd.conf
В spawn_options удалить флаг -terminate

2: Собственно сам запуск

/usr/bin/esd -tcp -promiscuous -public -port 1025 -as 2 &

в файл .xsession добавить:

ESPEAKER=’echo $DISPLAY | cut -f 1 -d ”:”’ 
export ESPEAKER=$ESPEAKER”:1025”