Выполните pip freeze > Reqirements.txt в активированном виртуальном окружении. Данная команда сама сформирует файл Reqirements.txt и засунет в него все нужные библиотеки и версии.
Roman Kitaev, А как быть в том случае, когда библиотеку ставил с git, а heroku ее на находит у себя? Я сейчас как раз таким вопросом чертовски озадачен..