ВУЗ в неподходящем возрасте, работа, паника. Как быть?
Я не очень понимаю, почему вас беспокоит реакция «общества», учитывая, что это ваша жизнь и ваш выбор.

Теперь по пунктам:

1. В России пороговый возраст поступления в вузы не ограничен. Как к этому отнесутся окружающие? Да всем насрать.

2. Совмещайте работу с учебой, если не рассматриваете вечернюю и заочную форму обучения.

3. Работодатели будут реагировать по-разному.
Никто не посмотрит на тебя криво :)
Часть преподов даже рады будут, ибо ты более осознан, чем юные школьники. 

Математика отличный выбор. Если ты готов учиться, то вузы в России платят по 20 тысяч стипендии. Плюс в самых крутых вузах уже с 3 курса начинают хантить ребят на работу. 
Так что проблем у тебя не будет :)
Если только: поступить на бюджет и не вылететь