Почему Jupyter noteboor не видит torch?

Question

[Ogoun Er]

ОС ubunta 22.04
CUDA 11.7

Кратко:

!pip3 show torch
Name: torch
Version: 2.0.1

import torch
ModuleNotFoundError                       Traceback (most recent call last)
Cell In[32], line 1
----> 1 import torch

ModuleNotFoundError: No module named 'torch'

Подробнее, jupyter не видит torch, перепробовал все советы из интернета, не помогло. Пробовал виртуальное окружение от конды, от virtualenv, пробовал ставить торч для процессора, для видеокарты. Установка проходит успешно:

python
Python 3.10.9 (main, Mar  1 2023, 18:23:06) [GCC 11.2.0] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import torch
>>> torch.cuda.is_available()
True
>>>

Уставновил торч и через конду и через pip. Ничего не сработало. В юпитере так и не видно пакет, хотя в нем же команда !pip3 show torch показывает что он установлен.

Answer 1

[Максим Припадчев]

Ты когда команду запускаешь, !pip3 show torch там тебе должно выдать в том числе и location (Путь). Ты не упомянул, у тебя стоит анаконда или ты просто jupyter поставил. Судя по всему анаконду ты не установил. Создай окружение посредством conda в терминале, активируй его conda activate environment name. Затем запусти, jupyter и тогда устанавливай torch.

Еще в jupyter посмотри у тебя есть разные окружающие среды ты можешь сменить kernel? если нет установи ipykernel. И проделай то что я написал выше.

Вот по ссылке пример, что бы с ipykernel не запутался https://www.geeksforgeeks.org/using-jupyter-notebo... . Это на случай если проблема в том что ipykernel не установлен. А так не забудь активировать свое окружение а не просто его установить.

Comments

[Ogoun Er]

Использую анаконду, версия
conda 23.5.0

Ядро Pythin3 (ipkernel)

Виртуальное окружение конды создавал.

Затем запусти, jupyter и тогда устанавливай torch.

Именно так и делал.

[Максим Припадчев]

Ogoun Er, Ну хорошо раз используешь анаконду !pip show tourch локация /anaconda3/lib/python3.10/site-packages такая?

[Максим Припадчев]

Ogoun Er, Анаконда это дистрибуция и она имеет релизы а не версии, а конда это менеджер пакетов и виртуального окружения анаконда и конда это разные вещи, это я на всякий случай, а то из твоего коммента не совсем ясно.

[Ogoun Er]

Максим Припадчев, /home/ogoun/anaconda3/lib/python3.10/site-packages

Путь такой, пакеты такие:
torch/ torchaudio-2.0.2-py3.10.egg-info/ torchvision-0.14.1.dist-info/
torch-1.13.1.dist-info/ torchgen/ torchvision-0.15.2-py3.10.egg-info/
torch-2.0.1-py3.10.egg-info/ torchmetrics/ torchvision.libs/
torchaudio/ torchmetrics-0.8.0.dist-info/
torchaudio-0.13.1+cu117.dist-info/ torchvision/

[Максим Припадчев]

Ну смотри, я постоянный пользователь, anaconda и с torch конечно же приходилось работать. Если все стоит и установлено в верное окружение у тебя по умолчанию base окружение активированно. То есть в терминале (base) все что ты устанавливаешь, устанавливается туда. И когда ты запускаешь jupyter и из него !pip он устанавливает туда. Ты можешь посмотреть conda env list. Список своих окружений conda activate name (активировать) conda deactivate деактивировать.

Если с этим все в порядке, значит в результате какого то конфликта anaconda перестала нормально работать. У меня такое было как то matplotlib не импортировался в результате конфликта. Я сносил анаконду (не конду а имеенно анаконду и устанавливал ее заново).

Кстати torch входит набор базовых пакетов анаконды. У меня из jupyter импортируется нормально. https://docs.anaconda.com/free/anaconda/install/un... Вот ссылка на удаление анаконды. Потом заново поставь и пробуй. Если дело не в окружениях, значит конфликт.

[Ogoun Er]

Максим Припадчев, полностью снес конду и поставил заново, сделал виртуальное окружение, поставил в нем торч, и все то же самое. Через пайтон работает, через юпитер пакет не импортится

[Ogoun Er]

Максим Припадчев, обнаружил что в виртуальном окружении версия питона 3.11.3, а в юпитере который запущен в этом же окружении версия 3.10.6

[Ogoun Er]

Максим Припадчев, получилось. Создал виртуальное окружение с той же версией python которая под (base), затем в окружении выполнил conda install jupyter, после чего там же установил торч через
conda install pytorch torchvision torchaudio pytorch-cuda=11.7 -c pytorch -c nvidia
запустил юпитер и торч завелся.
Ностальгия аж по XP и его DLL Hell проснулась. Надеюсь когда нибудь и в никсах смогут работать с версионностью нормально)