Со смарт картами не общался... немного по RFID... по этому буду врать )))
Там проблема с питанием, если метка находиться далеко от поля или напряженность поля мало - не хватает питания для запуска (часто при высоких частот). Поэтому предел 9600 - это скорее всего защита от низкого питания, при меньшем напряжении вообще не запуститься. Ему просто не хватит всей энергии что бы завершить передачу, он медленнее накапливает заряд, чтобы выкинуть данные. При идеальных условиях питания он упирается уже в собственную скорость срабатывания и передачи.
Есть еще одна сторона - что записали в Смарт-карту: Может микропроцессор выполняет сложные вычисление прежде чем передать что то на выход. Чем сложнее тем дольше.