Adamos

https://kassa.yandex.ru/developers/using-api/testing
ну а настройки хранить в .env файле, который в гитигноре

Кот Том отжирает около 20-60 мегов памяти. Мускул - примерно также. (но конечно же есть варианты). Вместо tomcat можно взять Jetty - ест гораздо меньше - мега 2 в минимуме. В принципе, если не делать мемориликов и утечек памяти, то любой хостинг начального уровня на 1 CPU и 512Mb - за глаза, даже с кешированием, гусарами и куртизанками.
А все остальное: производительность, rps и все остальное - зависит только от вашего приложения, кеширования, архитектуры, работы с базой и данными. Как пример linux.org.ru , сайт с гигантской аудиторией. Вот что они о себе пишут - https://www.linux.org.ru/about (см. Софт и Сервер).

tar + cron, классика всех классик.

Можно rcync + cron.

Манов полон Гугл.

как писать поддерживаемый код?

Если уж очень коротко, то соблюдать SOLID/GRASP. Мне понравился твит одного из авторов React Router:
https://twitter.com/mjackson/status/1171524189850701825

Most common mistake software developers make: putting stuff in the wrong place. Coupling responsibilities and concepts that should be kept separate.
For me, this is 95% of software development. Just figuring out *where* things belong.

Что гуглить, что учить?

Фундаментальные знания, вроде вышеупомянутых SOLID/GRASP, паттерны (не только классические паттерны, но и вообще, общеизвестные решения определённых задач), базовые структуры данных. Фреймворки/библиотеки всегда будут приходить/уходить, что-то будет забываться. А фундаментальные знания всегда актуальны.

Может литературу какую почитать посоветуете?

Скажу за себя. Ни одной из этих известных книжек за свою жизнь не прочитал. Писал много говнокода дома, очень много. Удалял, переписывал. Смотрел код других людей, анализировал, пытался перенять то, что считал правильным.

Можно ли себя называть миддлом, если твой код говно?

Не пытайтесь себя оценить. В каждой компании свои понятия миддла. А если кто-то 35 лет на лиспе кодил, а потом прыгнет на Angular - кто он, джун или сеньор?
И, да, все мы в какой-то степени пишем говнокод. Если кто-то Вам доказывает, что он пишет супер чистый код - не слушайте.

И ответ на главный вопрос.

Как перестать говнокодить и принимать неверные архитектурные решения?

Это невозможно. Все проекты, которые чуток сложнее CRUD-ов, рано или поздно обрастают говнокодом. Никто не пишет идеальный код. Код должен работать и решать проблемы бизнеса.

Вам необходим utf-8 с BOM
UPD:
Как это сделать:
.to_csv('file.csv',encoding='utf-8-sig')

JSON такого объема в принципе идея плохая. Встроенная функция json_decode умрёт, придётся писать какой-то парсер.
Потому что эти 15 гигабайт должны будут целиком загрузиться в оперативную память, потом перестраиваться в объект. Итоговое потребление оперативной памяти пророчествую, не меньше 30 гигабайт и то считаю себя наивным.
Ключевая проблема - файл нельзя читать порциями по заранее известному разделителю, получая валидные фрагменты JSON.
Возможно добрые люди уже сделали из этого файла пачку JSON - просто дописывая построчно отдельные объекты, но тут лучше показать фрагмент файла, чтобы предлагать методы оптимизации.

Посмотрите такой вариант для командной строки, запускайте на сервере который не жалко, возможно придётся потом его ронять в перезагрузку - https://stedolan.github.io/jq/

Более цивильный вариант - CSV, читать построчно, копить пакет запросов в БД, пачкой в несколько десятков запросов лить в базу.

UPD: гениальный вариант - а если залить это счастье напрямую в MongoDB, а потом по отдельным записям кромсать - получится?

Решение:

class Database {
  private $mysqli;

  public function __construct(){
    $dsn = "mysql:host=localhost;dbname=banan165_database";
    $this->mysqli = new PDO($dsn, "root", "");
  }
  public function query($sql){
   return $this->mysqli->query($sql);
  }
}

$db = new Database();
$db->query("INSERT INTO categories(name) VALUES('PDO')");

Но если правильно - так не делается.

Извещение о копирайте требуется Женевской конвенцией об авторском праве (и некоторыми более ранними, например Буэнос Айресской), без него опубликованный материал в странах являющихся участниками только Женевской конвенции может быть использован как общественное достояние.
Однако, в настоящее время практически все страны охраняющие авторское право, включая Россию (с 1995 года) являются участниками Бернской конвенции, в которой действует принцип презумпции авторского права (оно существует с момента создания произведения и не зависит от знаков копирайта, регистрации и т.п.), законодательство РФ так же соответствует Бернской конвенции, поэтому на практике знак копирайта в настоящее время ни на что не влияет.

Но, в случае выхода какой-либо стран из Бернской конвенции, в этой стране автоматически будут действовать положения Женевской (по условиям присоединения к Бернской конвенции), поэтому размещение знака копирайта можно считать страховкой на будущее.

зачем его писать в куки, если он должен быть уникальным на каждый запрос?

нет никакого плана, только опыт.
нельзя прочитать/посмотреть что-то и сразу просветиться.
теория даст базу, но без практики эта база ничего не стоит и быстро забудется.
прост решайте задачи по интересующей тематике, и всё придёт само собой.

высокий порог входа больше не в технологиях а в решаемых задачах.
Если вы предлагаете услуги создания лендингов - то порог (и оплата) на уровне лендингов и не важно на чем вы его запилите

Развивайтесь в сторону создания более сложных вещей - там и технологии поймутся.
Более сложные - это всевозможные веб-приложения, забудьте о сайтах.
А приложения могут быть уже какими угодно и с большим разбросом по сложности - может быть CRUD админка которую любой индус накидает, а может быть какая-нибудь замороченная система бизнес-аналитики, где кнопки в браузере - это только 10% от всего функционала, и это одна из причин почему ищут фуллстеков. Фуллстек в состоянии взять фичу и сделать её полностью, а не "накидать кнопок и ждать бекенд" или "сделать апишку и отдать фронту".

Вам поможет xvfb https://en.wikipedia.org/wiki/Xvfb и команда xvfb-run manpages.ubuntu.com/manpages/xenial/man1/xvfb-run....