Чтобы работало на ЛЮБОМ компе есть только такой выход, а зашить символы можно какие хочешь хоть весь алфавит, хоть только те символы какие посчитаешь нужными, и если в тексте будет символ который не зашит, то он не отобразиться, он просто будет пропущен. О том как зашивать шрифты можно найти в поиске, можно еще посмотреть про динамически подгружаемые шрифты.
здесь