в общем ответ такой
import ssl
ssl_context = ssl.create_default_context(ssl.Purpose.CLIENT_AUTH)
ssl_context.load_cert_chain('сертификат', keyfile='приватный ключ')
и в запуск добавить
if __name__ == '__main__':
web.run_app(app, host='адрес', port=4772, ssl_context=ssl_context)