Я проверял - масштабирование, повороты и сдвиги через параметр matrix в методе draw на скорость не влияют. То же самое и с другими параметрами метода. На скорость draw влияет только количество пикселей, которые нужно отрисовать в битмапу, так что если повернуть исходное изображение таким образом, что количество пикселей, попадающих в битмапу уменьшится, - скорость отрисовки пропорционально увеличится.

Мне уже лень делать тесты, но, насколько я знаю, быстрее draw только copyPixels.

действительно я выжил из ума и написал draw когда имел в виду copyPixels

copyPixels() действительно хорош, попробовал - появились впечатляющие результаты, scrollRect - вообще не вариант.
Но было бы неплохо если бы мне подсказали как избежать эффекта "победа пасьянс ХР" (наложение новых пикселей на старые) :(

Конечно же, нужно очистить изображение. Например так:

bitmapData.fillRect() то что надо для очистки экрана
но очистка нужна только если фон прозрачный, если фон без альфаканала, то достаточно нарисовать новаый фон прямо поверх старого.

Когда я рисую в основной битмап через copyPixels() то следующее изображение режет все те что на уровень ниже прозрачными пикселями, как это обойти?

если я не ошибаюсь, то последний пареметр copyPixels - mergeAlpha отвечает за это