Почему не работает скрипт с Tensorflow?

Question

[Erix Rolex]

Я на python не пишу. Нужно запустить скрипт проверить как работает, но не могу разобраться почему tensorflow спит ошибками. Ругается что файла в папке нет, а он вроде есть. То ли у tensorflow свое окружение какое то.

Вот полный вывод ошибки, подскажите что делать пожалуйста:

Traceback (most recent call last):
  File "demo.py", line 76, in <module>
    demo()
  File "demo.py", line 41, in demo
    graph_def = load_graph('network/FaceReconModel.pb')
  File "demo.py", line 16, in load_graph
    graph_def.ParseFromString(f.read())
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/python/lib/io/file_io.py", line 119, in read
    self._preread_check()
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/python/lib/io/file_io.py", line 79, in _preread_check
    compat.as_bytes(self.__name), 1024 * 512, status)
  File "/usr/local/lib/python2.7/dist-packages/tensorflow/python/framework/errors_impl.py", line 473, in __exit__
    c_api.TF_GetCode(self.status.status))
tensorflow.python.framework.errors_impl.NotFoundError: network/FaceReconModel.pb; No such file or directory

Answer 1

[Сергей Тихонов]

Файл с моделью найти не может.

Comments

[Erix Rolex]

Да, это я уже понял. Но почему?
Ведь он есть

[Сергей Тихонов]

Скорее всего он есть, но не там, где его ищет tensorflow.

Попробуйте исключить TF из отладки вообще, чтобы убедиться в очевидном :)
f = open('network/FaceReconModel.pb', 'r')
На 100% этот код (тупо открытие файла на чтение) выдаст ту же ошибку, потому что в load_graph именно это и происходит.

[Erix Rolex]

Вот, кажется это нужное направление.
Как можно исключить TF из отладки?

[Erix Rolex]

При запуске python в консоли в той же папке
И введя там строку которую вы предложили, открытие файла не удалось

Traceback (most recent call last):
File "", line 1, in
FileNotFoundError: [Errno 2] No such file or directory: 'network/FaceReconModel.pb'

Как мне сделать так чтобы TF был в нужной папке?

[Сергей Тихонов]

Создать а рабочей директории папку network ну и дальше понятно уже

[Erix Rolex]

Создал в домашней директории но по прежнему та же ошибка.
Видимо рабочая директория это не домашняя. А как узнать рабочую директорию?

[Сергей Тихонов]

os.getcwd

[Erix Rolex]

Странно. Этой командой он мне показывает полный путь до той директории в которой я нахожусь,
И по идее тогда должно работать

[Сергей Тихонов]

Ну есть ещё вариант абсолютный путь передать

[Erix Rolex]

Я пробовал в скрипте полный путь от корня указать, но все равно говорит что не найдено (
Слушай а ты мог бы мне помочь запустить вот эту нейросеть? Я отблагодарю.
https://github.com/microsoft/Deep3DFaceReconstruction

Не могу уже несколько дней ее запустить, чтобы скрипт demo.py нормально заработал.

[Erix Rolex]

О кажется получилось избавиться от предидущей проблемы. Но появилась другая:

/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:516: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint8 = np.dtype([("qint8", np.int8, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:517: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_quint8 = np.dtype([("quint8", np.uint8, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:518: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint16 = np.dtype([("qint16", np.int16, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:519: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_quint16 = np.dtype([("quint16", np.uint16, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:520: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint32 = np.dtype([("qint32", np.int32, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorflow/python/framework/dtypes.py:525: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  np_resource = np.dtype([("resource", np.ubyte, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:541: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint8 = np.dtype([("qint8", np.int8, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:542: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_quint8 = np.dtype([("quint8", np.uint8, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:543: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint16 = np.dtype([("qint16", np.int16, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:544: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_quint16 = np.dtype([("quint16", np.uint16, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:545: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  _np_qint32 = np.dtype([("qint32", np.int32, 1)])
/home/parallels/.local/lib/python3.5/site-packages/tensorboard/compat/tensorflow_stub/dtypes.py:550: FutureWarning: Passing (type, 1) or '1type' as a synonym of type is deprecated; in a future version of numpy, it will be understood as (type, (1,)) / '(1,)type'.
  np_resource = np.dtype([("resource", np.ubyte, 1)])
WARNING:tensorflow:From demo.py:40: The name tf.placeholder is deprecated. Please use tf.compat.v1.placeholder instead.

WARNING:tensorflow:From demo.py:14: The name tf.gfile.GFile is deprecated. Please use tf.io.gfile.GFile instead.

WARNING:tensorflow:From demo.py:15: The name tf.GraphDef is deprecated. Please use tf.compat.v1.GraphDef instead.

WARNING:tensorflow:From demo.py:47: The name tf.Session is deprecated. Please use tf.compat.v1.Session instead.

2019-10-13 20:36:26.402257: I tensorflow/core/platform/profile_utils/cpu_utils.cc:94] CPU Frequency: 2294770000 Hz
2019-10-13 20:36:26.402471: I tensorflow/compiler/xla/service/service.cc:168] XLA service 0x75077d0 executing computations on platform Host. Devices:
2019-10-13 20:36:26.402549: I tensorflow/compiler/xla/service/service.cc:175]   StreamExecutor device (0): <undefined>, <undefined>
reconstructing...
1
/home/parallels/d3/preprocess_img.py:19: FutureWarning: `rcond` parameter will change to the default of machine precision times ``max(M, N)`` where M and N are the input matrix dimensions.
To use the future default and silence this warning we advise to pass `rcond=None`, to keep using the old, explicitly pass `rcond=-1`.
  k,_,_,_ = np.linalg.lstsq(A,b)
2019-10-13 20:36:26.832640: W tensorflow/compiler/jit/mark_for_compilation_pass.cc:1412] (One-time warning): Not using XLA:CPU for cluster because envvar TF_XLA_FLAGS=--tf_xla_cpu_global_jit was not set.  If you want XLA:CPU, either set that envvar, or use experimental_jit_scope to enable XLA:CPU.  To confirm that XLA is active, pass --vmodule=xla_compilation_cache=1 (as a proper command-line flag, not via TF_XLA_FLAGS) or set the envvar XLA_FLAGS=--xla_hlo_profile.
Traceback (most recent call last):
  File "/home/parallels/.local/lib/python3.5/site-packages/scipy/io/matlab/mio.py", line 39, in _open_file
    return open(file_like, mode), True
FileNotFoundError: [Errno 2] No such file or directory: 'output/input/vd092.mat'

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "demo.py", line 76, in <module>
    demo()
  File "demo.py", line 72, in demo
    savemat(os.path.join(save_path,file.split('\\')[-1].replace('.png','.mat')),{'cropped_img':input_img[:,:,::-1],'coeff':coef,'landmarks_2d':landmarks_2d,'lm_5p':lm_new})
  File "/home/parallels/.local/lib/python3.5/site-packages/scipy/io/matlab/mio.py", line 266, in savemat
    with _open_file_context(file_name, appendmat, 'wb') as file_stream:
  File "/usr/lib/python3.5/contextlib.py", line 59, in __enter__
    return next(self.gen)
  File "/home/parallels/.local/lib/python3.5/site-packages/scipy/io/matlab/mio.py", line 19, in _open_file_context
    f, opened = _open_file(file_like, appendmat, mode)
  File "/home/parallels/.local/lib/python3.5/site-packages/scipy/io/matlab/mio.py", line 45, in _open_file
    return open(file_like, mode), True
FileNotFoundError: [Errno 2] No such file or directory: 'output/input/vd092.mat'

[Erix Rolex]

Очень был бы благодарен если бы ты помог запустить эту нейросеть.
Мой телеграмм https://privnote.com/IPE7m7VA#GsAdSwVmJ

[Сергей Тихонов]

Ну опять папок не хватает. С сеткой не помогу, я тф последний раз года три назад ковырял.

[Erix Rolex]

Понял. Ну я бросил пока эту затею. Пробую с Docker ее запустить но там тоже какая то ерунда получается при запуске контейнера. Что то просит сделать, а без этого не находит opencv почему то, или не находит видеокарту что ли не пойму.

WARNING: You are running this container as root, which can cause new files in
mounted volumes to be created as the root user on your host machine.
To avoid this, run the container by specifying your user's userid:
$ docker run -u $(id -u):$(id -g) args...
]0;root@34eb0a3cc15f: /Deep3DFaceReconstructionroot@34eb0a3cc15f:/Deep3DFaceReconstruction# exit