Можете через один, если вам хочется

Но имелось в виду в каждом.
Как же иначе?
С некоторыми извращениями можно заставить и реагировать с пользователем.
Если перемещение в контейнере не добавленном в список отображения, то
getObjectsUnderPoint вам в помощь. Получаем список объектов при мышином событии, которое поймал вьюпорт и вручную диспетчим от самого верхнего чайлда. Метод возвращает только объекты самого нижнего уровня иерархии отображения, поэтому появляются свои тонкости реализации.
Если используете блиттинг (то есть вообще без дисплейобджектконтейнеров, а своя иерархия), то
Bitmapdata:hitTest вам в руки.