Смотри. Насколько я знаю в конструкторе класса ReplyKeyboardMarkup такое не предусмотрено.
Но ты можешь вынести это в обработку логики самой кнопки.
Когда человек нажимает на кнопку (обычную) он отправляет боту текст, который ты ловишь с помощью декоратора-хэндлера, для примера возьмем кнопку "Найти фильм':
@bot.message_handler(regexp = 'Найти фильм')
def find_film(message):
pass
Далее, нам надо добавить туда логику, что бы убиралась клавиатура после нажатия кнопки.
Для этого есть класс ReplyKeyboardRemove.
Воспользуемся им:
@bot.message_handler(regexp = 'Найти фильм')
def find_film(message):
markup = telebot.types.ReplyKeyboardRemove()
bot.send_message(message.chat.id, 'remove keyboard', reply_markup=markup)
Таким образом, логику которую ты не можешь поместить в конструктор класса ReplyKeyboardMarkup - ты можешь вынести в функции обработчики.