Библиотека - это набор модулей (а также других файлов, таких как документация и примеры), которые связаны между собой и выполняют определенную задачу.
Модуль - это файл, который содержит определения функций, классов и переменных, которые могут быть импортированы и использованы в других Python кодах.