Хм. Очевидный ответ - изменить координаты отрисовки. Храните координаты в классе, который вы рисуете, в этом же классе проверяете попал ли палец в него.
Слои - у вас же и так по слоям все рисуется. Сначала то что внизу, потом то что вверху. проверяем клик в обратном направлении, если попали в объект - не проверяем дальше.