Как совместить golang с php?

Question

[ie200]

Всем здравствуйте!

У меня многие пытаются узнать, можно ли совместить Golang с PHP и на оборот. Но... на просторе интернета мало информации, или же я плохо ищу. Однако, в последнее время я задался таким вопросом. И хотелось бы узнать правду.

Давайте представим такую ситуацию. Вы реализовывали MVC на PHP, к примеру: Систему для анализирования ассоциативных семантических ядер. После чего вы столкнулись с проблемой обработки данных. База данных отправляет ответ за 0.003 секунды. Но... из-за обработки данных загрузка пользовательской страницы составляет каких-то от 14 до 20 секунд. Понимаю, это не приемлемо!

Поэтому вы прибегаете к помощи Ajax запросов или же к разделению сервисов на Сервер и Пользователь. После чего чего загрузка пользовательской страницы составляет, примерно те же цифры, от 10 до 15 секунд.

Забыл сказать, что база данных отвечает вам примерно в 1 миллион строк. Что существенно влияет на обработку данных. Поэтому такая долгая загрузка пользовательской страницы.

Теперь поговорим о разделении сервисов на Сервер и Пользователь. Вы решаетесь на тестирования новых неведомых наук. Думаете что многопоточный язык Golang спасет весь мир. Значит появляется задача о внедрении данного языка в вашу систему, которая является обычным MVC.

После чего встает вопрос: как именно это сделать и как реализовать?

Есть некая архитектура директорий вашего проекта, которая должна существовать в экосистему (строго):

|- app /
    |- core /
        controller.php
        model.php
        route.php
        view.php
    |- lib /
        |- messages /
            errors.php
        |- security
        |- validation
        database.php
        vendor.php
    init.php

|- build /
    |- controllers 
        home.php
    |- models/
        |- home
            index.php

|- private /
    |- config
        routes.php
    |- database
        name_database.sql

|- public /
    |- api /
        connect.php
    |- docs
    |- res /
        |- src

|- template /
    |- errors /
        404.html
    |- layouts /
        default.html
    |- views /
        |- home /
            index.html

|- web /
    |- css
    |- js
    .htaccess
    index.php
.htaccess

Вам не обходимо внедрить Golang в PHP, для отправки запросов к базе данных, обработки данных, отправки ответа к пользовательской странице, которая написана на PHP. Но... у вас затруднение в реализации данной идеи.

Да, можно реализовывать с помощью websocket. Все же охота увидеть это не на словах, а на деле!

А теперь вопросы по реализации:

1. Не могли бы вы предложить способ внедрения Golang в PHP?
   
2. Не могли бы вы привести пример данной реализации?
   
3. Какие еще альтернативы можете предложить? К примеру, совмещение Vue с PHP.
   

Comments

[Алексей 〒.]

Для начала стоило бы попробовать оптимизировать PHP код. Если этих мер недостаточно, то напишите отдельный микросервис на Golang.
С бекенда на PHP сможете общаться с ним через REST Api. (то есть выносите трудоемкую процедуру в отдельный сервис)
Еще можно воспользоваться готовым мостом через websocket https://github.com/spiral/goridge

[Сергей Горностаев]

У меня многие пытаются узнать

Странно, обычно интересуются у экспертов.

[Алексей Скобкин]

У меня многие пытаются узнать, можно ли совместить Golang с PHP и на оборот. Но... на просторе интернета мало информации, или же я плохо ищу. Однако, в последнее время я задался таким вопросом. И хотелось бы узнать правду.

Прошу прощения за нетематический комментарий, но читая этот абзац мне сразу захотелось включить тревожную музыку и представить, что это начало очередного сюжета с РАССЛЕДОВАНИЕМ.

Answer 1

[FanatPHP]

загрузка пользовательской страницы составляет, примерно те же цифры, от 10 до 15 секунд.
база данных отвечает вам примерно в 1 миллион строк
встает вопрос: как именно это сделать и как реализовать?

Два простых шага:
1. Оторвать руки тому, кто вот это всё написал, и засунуть их ему туда, откуда они у него растут.
2. Нанять PHP junior-a, который уже освоил базовый синтасис SQL и умеет запрашивать из БД нужное количество строк.

ЗЫ.

Какие еще альтернативы можете предложить? К примеру, совмещение Vue с PHP.

Внимательно присмотреться к тому, кто подаёт такие идеи для решения этой проблемы.

Comments

[ie200]

Постараюсь реализовать ваш замысел.

Идея хорошая. Есть еще альтернативные решения?

[FanatPHP]

Нет

[Дмитрий Свиридов]

ie200, какие альтернативные? Если в базе лям строк, то зачем весь лям разом оттуда выгребать? Прямо все данные сразу нужны?
А если это не так и сам запрос медленно работает, то можно с помощью explain его проанализировать и индексы повесить на таблицу. Какую конкретно задачу вы хотите решить с помощью go?

[ie200]

Дмитрий Свиридов, О определенных задачах было написано в самом вопросе:

Вам не обходимо внедрить Golang в PHP, для отправки запросов к базе данных, обработки данных, отправки ответа к пользовательской странице, которая написана на PHP.

Go нужен для отправки запросов к базе данных. После чего база данных ответит примерно в 1 миллион строк. Потом Go обработает полученные данные, сформирует текстовый формат JSON и отправит его на пользовательскую страницу.

Изначально была такая идея. И она достойна внимания.

Хотелось бы узреть саму реализацию. Вдруг кто-то практиковал или видел способ реализации.

[Дмитрий Свиридов]

ie200, это решается с помощью кеширования. То есть не надо каждый раз ходить в базу, вытаскивать миллион строк, обрабатывать и отдавать. Просто храните готовый JSON в memcached или Redis - и достаете оттуда. Периодически актуализируете данные.

Если прямо вот совсем данные часто меняются, то вам потребуются очереди. То есть юзер жмет кнопку, получает сообщение, что результаты будут отправлены ему на имейл (или в личном кабинете появятся). Бэкенд добавляет запрос на обработку в очередь, которую обрабатывают воркеры. Когда воркер обработал задачу, он результат либо на мыло юзеру отправляет, либо кладет куда-то там. Можно (и нужно) это объединить с кешированием опять-таки, чтобы юзер не наплодил гору задач, которые выжрут вам все ресурсы сервера.

P.s. почему вы думаете, что на go это начнет внезапно сильно быстрее работать? Сколько из этих 15 секунд занимает именно обработка массива из миллиона строк?

[FanatPHP]

Дмитрий Свиридов, никто никогда не кэширует миллион строк.
Здесь сама постановка задачи идиотская. Тут не нужен кэш. Тут просто надо доставать из базы только те данные, которые нужны в ответ на конкретный запрос.

И, кстати, непонятно, как вообще работает ваше решение. Вы предлагаете хранить в редисе джейсн строку с массивом из миллиона строк? Или что имелось в виду под "готовый JSON"?

[Дмитрий Свиридов]

FanatPHP, почему миллион строк? Не миллион строк, а готовый JSON - результат обработки этого миллиона строк. Мое решение очень простое:

1. Получаешь данные из базы (лям строк)
   
2. Обрабатываешь, считаешь - получил результат (это уже не лям строк)
   
3. Результат преобразуешь в JSON и пихаешь в кеш
   

При последующих запросах просто достаешь из кеша, в базу не ходишь и ничего не считаешь. Надо только подумать, что именно будет ключом кеша и как часто значение в кеше актуализировать.
"Тут не нужен кэш" - по возможности кеш нужен всегда, когда есть такая возможность, чтобы сервер не прилег внезапно под нагрузкой.

[Иван Колотилкин]

ie200, покажи нам то что у тебя там есть уже сделано. а мы тебе оптимизируем это.
прямо на ассемблере напишу обработчик.
тока глянуть дай исходники этого приложения с милионом строк)