Alex

Я бы сделал очередь. Пришла строка, запихнул в задачу, забыл. Но тут вопрос сколько памяти нужно на обработку 10к в секунду + реалтайм. Тут уже возникает кэш (в БД или на диске), который не дает переполняться памяти. Опытным путем выясняем сколько задач влезает в память. Если задач уже много в очереди - пишем в кэш. Если мало, то ставим в очередь.
Или вопрос был про парсинг и построение дерева? Тогда зависит от ЯП.

Выяснить чем ты будешь заниматься (должностные инструкции) и сколько за это будут платить.

Не очень понятно в чем проблема. У пользователя (и админа) есть id (а если есть группы пользователей, то id группы пользователей). В зависимости от этого id, мы в запросе из БД должны выбирать только задачи с нашим id пользователя в поле создателя, или все задачи, если это admin.

Смена порта помогла