Возможно низкоуровневое программирование без математики?
 Стоит ли идти в эту сферу, или это обреченно на провал? 
Вам - не стоит. Вы не осилили даже нагуглить ответ на один из самых частых вопросов на Тостере, так что к этой сфере со всей очевидностью не подходите.
Понимание процесса - это всё что нужно в 100% задач.