Рылся по старым вопросам, теперь сам понял как это сделать.
Покажу на примере Pyrogram, думаю не сильно отличается в других либах.
buttons = [[InlineKeyboardMarkup(text="Использовать вещь", "switch_inline_query_current_chat=Использовать вещь")]]
app.send_message(message.chat.id, "текст", reply_markup=InlineKeyboardMarkup(buttons))
text - текст кнопки
switch_inline_query_current_chat - текст который вводится в строку ввода