Как запустить Gulp из Php?

Question

[photosho]

Пытаюсь запустить gulp из PHP. Делаю либо, через "shell_exec", либо, через "system" с запуском bat-файла. В обоих случаях просто ничего не происходит. Причем, во втором случае bat-файл запускается, но команда "gulp" не дает результата. Если запустить файл вручную из Windows, то все работает. Использую OpenServer. Подскажите, в чем может быть проблема.

Answer 1

[Григорий Васильков]

Из PHP этого делать не нужно, вы все равно не получите потока данных, только поток отчетов.

Напишите "npm init", и в файле package.json сделайте секцию "scripts", потом запускайте из консоли перед установкой проекта на новую машину "npm run my_script_that_runs_gulp".

То есть проект оборачивают в контейнеры, чтобы это автоматизировать, а не заставляют язык программирования делать всё, тем более чтобы это запустить все равно придется открыть консоль и вызвать команду с php, или пройти по ссылке, чтобы веб сервер сделал это для вас.

Способ есть, для этого надо искать в доке как выдать на выход поток самих данных из функций галпа, который все равно сделан на node, перенаправить их в stdout, и мы можем подписаться на поток данных зачем-то и что-то с ними делать, но обычно это не нужно, т.к. галп это и есть обертка для потоков на node js.

Comments

[photosho]

Мне нужно просто запустить задачу сборщика из браузера, без доступа к SSH. Мне кажется, то, о чем вы пишете, не поможет решить этой задачи.

[Григорий Васильков]

А, если вам не дали доступ к консоли, то вы либо можете на локальной машине собрать папку build и закопировать её на сервер по ftp (это тоже так себе вариант, но то что надо - он сделает).

, либо использовать proc_open()

синтаксис такой

proc_open('console command', $desc, $pipes, $cwd, $env, ... и чото там еще)

$cmd: с консоль командой все понятно. но тут надо понимать что ваш новый процесс будет поднят из PHP процесса, и если PHP в своем PATH имеет только несколько записей, а в винде у вас десятка два - то придется указывать полные пути до скриптов

$desc: это описание потоков и их типов, ДОСТУПНЫХ процессу. Обычно выглядит так (читать от имени нового процесса):
$desc = [
0 => [ 'pipe', 'r'], // я читаю из этого потока
1 => [ 'pipe', 'w'], // я пишу весь stdout/echo в этот поток
2 => [ 'pipe', 'w'], // я пишу весь stderr в этот поток
];

Можно два указать или ни одного.

$pipes: после поднятия процесса эта переменная изнутри функции наполнится стримами потоков (resource). к ним можно потом применять fwrite()/fread()/feof() чтобы из них что-либо читать или в них писать. Поскольку $desc идет от имени процесса, то мы должны ЧИТАТЬ из потоков 1 и 2, а писать в поток 0, хотя на коде выглядит странно, когда написано 0 => ['pipe', 'r'], а потом в него почему-то fwrite(), но это именно то что должно быть процесс будет отсюда читать, а вы (программист) в-сюда писать.

$cwd: current working directory. Папка в которой открывается консоль перед запуском вашего процесса. Соответственно из этой папки и вашего PATH (который можно принудительно указать в $env потом) будет определяться, можно ли запустить команду при помощи например "php", или обязательно придется писать "D:/OpenServer/modules/php7.3/bin/php.exe".

$env: переменные окружения. Чаще всего нужно передавать свой PATH, т.к. пыха может не видеть весь PATH из винды. А точнее не так. Помнится в опенсервере есть такой прикол, что переменную PATH она читает из СИСТЕМНЫХ ПЕРЕМЕННЫХ КОНКРЕТНОГО ЮЗЕРА. То есть там три места есть. Есть переменные юзера, а есть системные, а есть системные у юзера. Вот из третьих оно наполняет, но там как правило хрен чего есть, поэтому иногда руками передают.

====

Важная западня в этой функции.
Вам точно захочется прочитать stdout. Но программа ваша может написать в stdout не сразу, а например в конце действия. Проще всего убедится написав перед echo "Hello World!" команду sleep(5). Программа повисит 5 секунд, после чего выведет что вы просили.

Но вам скорее всего захочется, чтобы по мере того как программа делает что-то и выводит вы сразу же получали от неё ответ, а не ждали пока она кончится.

Тут вам придется потренироваться с stream_select(). Ближайшая аналогия stream_select() это как бы "форич с таймаутом но только для потоков". То есть вы в него сгружаете все потоки что у вас есть, ставите таймаут в одну миллисекунду и оборачиваете это в бесконечный цикл, в каждом шаге проверяете статус процесса через proc_get_status($proc). Если процесс кончился - удаляете его из массива запущенных процессов, при этом сам цикл завершится если процессов в "пуле" не осталось.

Это позволит вам читать процесс асинхронно давая ему одну миллисекунду на обмен вместо ожидания пока придет первый байт.

[Сергей Ержович]

Григорий Васильков, Можно просто взять библиотеку )
https://amphp.org/
Вот пример:
https://github.com/amphp/process/blob/master/examp...

[Григорий Васильков]

Сергей Ержович, красиво завернули в фиберы, довольно простенько смотрится

только почему $process->join(), подключиться процессом куда? (ну у них это видимо "подождать") но при чем тут подключение

автору этого более чем достаточно.

а по поводу либы выглядит классной, главное понимать что асинхронка это не параллелька.

асинхронка это про переключение с функции на функцию в одном треде. тогда как если поднять несколько процессов через proc_open, то это уже переключение с функции на функцию в рамках всех доступных тредов, т.к. железо определяет каким ядром твой процесс делать в следующем такте, а асинхронка все таки остается внутри этого треда и с помощью него переключаясь между фиберами пошагово делает как-бы одновременно.

однако если действие будет тяжелое - станет видно, что одновременности нету, т.к. все шаги других фиберов ждут пока выполнится тяжелый. а вот если proc_open открыть то подвисший процесс не мешает другим делать свою работу, пока есть свободные треды на процессоре. впрочем наверняка класс Process под капотом именно это и делает и использует loop именно чтобы опрашивать потоки. Долбит по мозгам только yield который явно прерывает действие и переключается на следующий шаг, не уверен что он поддерживает таймаут на процессе как stream_select.

но как я уже сказал автору это не надо.

[Сергей Ержович]

Григорий Васильков,
Она вроде без файберов, на генераторах.. так как тогда их ещё не было. они хотят перейти на event loop от revolt php, типа он более новее
у них и паралелька есть)
https://amphp.org/parallel/.
ну тут ещё стоит учесть что запускать очень много процессов не всегда выгодно, может начаться потоковое голодание) для задач которые грузят проц, можно открывать их в отдельном процессе.

Есть ещё интересный пакетик:
https://symfony.com/doc/current/components/process.html

[Григорий Васильков]

Надо посмотреть как они это сделали но да, вроде оно. Пс фиберы просто интерфейс чтобы не юзать йелды, суть та же

От симфоней тоже простенько. А вот можно ли колаблы завернуть вопрос на лям. В амп вроде пишут можно. Посмотрим

А, хитро, кешируем имя каллабла, запускаем второй скрипт, достаем с кеша имя, декорируем имя в воркер, минус как и всегда повторная инициализация

[Григорий Васильков]

Сергей Ержович, у меня тут вопрос возник, не знаешь ли как скормить параллельному процессу ссылку на поток из этого? Я недавно вопрос задавал как сделать чтение и запись по кусочкам. И там подсказали то что я только сейчас понял. Содержимое стрима надо вычитывать в одном процессе, писать в другом и обрабатывать в третьем, иначе они будут друг друга блочить создавая простои. Точнее не в процессе а в треде, но тред на пыхе мы заюзать не можем без второго процесса. Но сокет то мы открываем из конкретного процесса и ресурс отослать из одного в другой не можем. Идеи?

[Сергей Ержович]

Григорий Васильков, честно говоря не знаю... я в пхп только с асинхронностью работал. и то так себе было, 100500 колбеков прокидывать надо и тд... сейчас для асинхронных приложей в пхп уже получше стало, ну 1 хрен лучше для этого ноду взять и не парится)

для таких задач тебе наверно лучше go взять, там как раз с этим всё хорошо как я слышал.

Answer 2

[Радость моя]

По хорошему вам сначала нужно узнать все env переменные которые у вас в юзере есть из которого вы запускаете из консоли сборщик. для этого введите env

Потом подсуньте вывод PATH в putenv и пути до ноды и npm в соотвествующие переменные.

Вот пример рабочего сборщика на нашем проекте (запускается из браузера при совпадении в GET секретного ключа который сами укажите):

<?php
ini_set('output_buffering', '0');

$documentRoot = dirname(dirname(__DIR__));

putenv('LANG=C');
putenv('LC_ALL=C');
putenv('PATH=/home/gituser/.nvm/versions/node/v16.13.0/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/snap/bin');
putenv("SHELL=/bin/bash");
putenv("HOME=/home/gituser");
putenv("COMPOSER_HOME=$documentRoot/.composer");

$key = 'MY_SECRET_KEY';
$php = '/usr/bin/php';
$composer = "$php /usr/local/bin/composer";
$node = "~/.nvm/versions/node/v16.13.0/bin/node";
$npm = "~/.nvm/versions/node/v16.13.0/bin/npm";

if (isset($_GET['key']) && @$_GET['key'] == $key)
{
    echo '<pre> Update...'.PHP_EOL;

    $cmd_arr = [
		"cd $documentRoot && $node $npm i",
		"cd $documentRoot && gulp build --env=prod",
    ];

    foreach ($cmd_arr as $cmd){
        echo PHP_EOL.PHP_EOL."<b>$cmd</b>".PHP_EOL;
        system("{ $cmd; } 2>&1");
        flush();
    }

    echo '<hr> Done.'.PHP_EOL;
    exit;
}

header('HTTP/1.1 404 Not Found');
echo '404 Not Found.';