Тормозит несомненно. Видно невооружённым взглядом.
Про такую проблему слышал, но у меня HTC MyTouch 3G (Magic), в котором вроде не было этой проблемы. Да и в других приложениях не замечал особо.
Вот в том-то и дело, что овер9000 :(
Класс унаследован от SurfaceView и в нём создаётся поток.
Сейчас проверил. Оказывается тормозит при удержании пальца даже если вообще не перегружать onTouchEvent из SurfaceView.