FastAPI автоматически генерирует только OpenAPI Specification, это про HTTP API, websocket это другой уровень, так что самим FastAPI никак, гугли сторонние библиотеки или читай что пишут в гите например https://github.com/fastapi/fastapi/discussions/7713