О да, это общая проблема у всех с физикой. Математика запаздывает ровно на полугодие. В первом полугодии уже нужны интегралы достаточно серьезно на физике, не то что производные. Потом там всяки контурный и поверхностные интегралы пойдут, а на математике о них еще ни слухом, ни духом.
После обычной школы было трудно, как сейчас помню. Вроде физика-то не сильно от школьной отличалась, а некоторые задачи не решались, потому что мозги на все эти интегралы были не настроены.
А вот в некоторых вузах технических физика из-за этого на втором семестре только начинается. У меня у некоторых отдноклассников так было. Им было легче.

Но ничего, все выкарабкивались и Вы выкарабкаетесь! Удачи!