Andrey_Dolg

Для автоматизации страниц средствами javascript раньше использовали TemperMonkey выгрузка чего-либо в файлы тоже через javascript. Распишите ещё критерии, в user script'ах обычно автозапуск при переходе на целевую страницу. В остальных случаях интерфейс придётся видимо самому писать.

UnsupportedOperation: question not readable.
А если без сарказма то нефига не понятно, что у вас за проблема, пишите более подробнее.
Ну если вы не доходите до browser.quit() в функции то вы явно в бесконечном цикле и
while True:
визуально неплохой кандидат на роль такого цикла.

Думаю стоит подумать, что такое парсер и как он работает. Ну кроме того что бы туда подкидывать 4-х листные клеверы и мочу единорога. =)

Можно тут целый веер способов. Если брать из них только те что доступны с обычного селениума, то все идут через javascript и подразумевают что вы:
1) либо повторите этот ajax запрос
2) либо подключитесь к функции что его посылает и прослушаете её
3) либо найдёте в какой переменой если она есть ещё в теле страницы хранятся данные.

Но если отказаться от селениума то будет обычно лучше. =)

Нет защиты как таковой. Защита это высокая степень ненужности информации и необходимость использования большого количества ресурсов для её добычи.
Можете использовать сторонние сервисы для защиты(не идеально), отсечёт 98% парсеров.
Но забавно конечно парсим и хотим от этого защититься. XD

openpyxl

Велика вероятность что данные приходят в одном из запросов. Изучайте те запросы что получает странице при загрузке.

Путей 2:
1) Вы управляете браузером это selenium и иже с ними средства +/- полноценного рендеринга страницы и извлечения данных.
2) Вы исследуете страницу и повторяете все запросы и передаваемые данные сами и получаете под каждый конкретный сайт скрип использующий все необходимые виды запросов для получения данных. И да websoсket один из необходимых в данном случае форматов обмена данных.

Используйте css селекторы или xpath. Из вашего примера:
soup.select("div.act_first")
Как результат:

<div class="act_first">
  <div class="stats">

    <div class="key">COLOR</div>
    <div class="value">Brown</div>

  </div>
</div>

BeautifulSoup создан для того чтобы вы не работали со страницей как с текстом.

(заранее мне их положение не известно).

Сомнительно что нельзя выбрать что-то одно используя класс.
Так же если вы хотите избежать дублей используйте множества.

почему-то возвращает не все картинки из галереи, а ровно 8

Намёк на прокрутку и как самый простой путь использование selenium'a или разбора JS для прямой подгрузки элементов в 1-ой сессии post запросами.

У вас 16 комбинаций user/ip + 2 минутный таймаут и юзер без кук так что это ещё хороший вариант.