できた方が楽かと思いますが、物理を数学に頼りすぎると物理的なものの見方ができない人になる可能性が高いかと。