Люблю физику(механику) и математику — стоит ли попробовать себя в game dev и как?
Устраивайтесь на работу в Autodesk или в Siemens или в SolidWorks или в Компас или в компанию Сухой - там делают тренажеры боевых самолетов для летчиков, ещё в каких то компаниях делают компьютерные тренажеры современной военной техники - т.е. танки, БТР, БМП и т.п. - полное погружение, покруче чем в играх, т.к. там есть кабина с кнопками, супер в общем, ещё есть тренажеры для офицеров, в которых можно командовать боем  и т.п. софт, который по сути аналогичен играм, но уровень реализма максимальный. 
Игры это плохо. От них пользы нет. Лучше займитесь разработкой военных, медицинских и т.п. тренажеров или САПР - в этих областях и математики и физики очень много.
Физика и механика слабо связаны с геимдевом. То есть там её нет, в понимании принятом в машиностроении и как её читают в вузах, где всё делает природа. Для введения в физику игр можете почитать Baraff, Mirtich, Witkin. https://en.wikipedia.org/wiki/Featherstone's_algorithm . В геимдеве всю физику может писать  1-2 человека из engine-отдела. Так что просто прийти и сказать "я люблю механику, дайте мне оптимизировать хавок под ps4" не получится. Тут скорее возьмут человека, который может написать 2000 строк хорошего кода в неделю, и дать ему нжные бумажки месяцок почитать. Чем человека у которого вдруг щелкнуло в голове после гугления зарплат, что он вдруг полюбил точные науки.