[-De-]

Вопрос "что тормозит" был к тому, что собсно править надо именно то, что тормозит. Если вся игра, то всю игру)
Надо определить, что же конкретнее начинает жрать много. Ну в общем на геймдеве там в терминах в разделе физика даны основные понятия о том, как физ. двиги работают, читайте)
Возможно даже тяжелой артиллерии не надо, только завести собсно AABB и проверку по ним и если было просчитано взамиодействие 1 с 2, то не проверять, как у вас делается, взаимодействие 2 с 1.