Александр Кузнецов

DNS для сайта используется системный. Те настройки DNS, которые установлены на машине с сайтом Вы не получите просто так, не имея доступа к ней.

Как получить IP сайта - его можно получить по имени.
Интереснее уже именно понять, что пользователь посещает. Тут нужны утилиты-снифферы.
Подобный вопрос разбирался на stackoverflow.com - https://stackoverflow.com/questions/16767562/websi...
Так же, можно ознакомиться со статьей на codeproject.com - https://www.codeproject.com/Articles/17031/A-Netwo...

Получаете исключение, скорее всего, вот тут

string money = myCommand.ExecuteScalar().ToString();

потому, что ExecuteScalar вернет NULL, который Вы не можете привести к строке.
Как это можно обойти.
К примеру, вот так:

string money = myCommand.ExecuteScalar()?.ToString();

и в money окажется значение NULL. Или вот так

string money = myCommand.ExecuteScalar()?.ToString() ?? "";

и в money окажется пустая строка.
Я не уверен, что последний вариант - лучший, но тут вам смотреть, что удобнее.

Я не буду дублировать текст с сайта, у вас токен должен быть менее 256 байт, а общая длина менее 65 kb, при этом, советуют 2kb. Подозреваю, совет не зря.

Если говорить более по делу, вопрос больше именно к общему размеру. Обратите внимание, на размеры символов в кодировке utf8 ( https://ru.wikipedia.org/wiki/UTF-8 ).

Если Вы планируете уйти от .NET (что, на мой взгляд, немного странно - современные тенденции Microsoft очень неплохое, прям радуют), то, можно посмотреть и на Django.
Как было подмечено в комментариях, это потянет за собой изучение Python и Django, их инфраструктуры. Как по мне, чтобы ответить на этот вопрос с точки зрения фриланса - то тут Вам нужно понять рынок - а что требуется. Для этого, просто зайдите на биржи и посмотрите заказы по backend - что там требуется то. После этого сделаете выводы.
Как по мне, для фриланса подойдет как .NET (в вашем случае .net core, который уже весьма неплох), так и тот же PHP (slim, silex symfony 4 и т.п.). Можно рассмотреть стэк Node.JS, вполне неплохой вариант.

Не уверен, что стоит смотреть Java/Scala/Erlang - это больше для основной работы, для "энтерпрайза", как по мне. Но, как я выше отметил - если есть потребность - почему бы и нет. У Java есть Sping Boot, Scala - Akka и Akka.Http, erlang - не совсем его, но elixir.

Грубо говоря, выведите массив, там будет id, key и value. Отправляйте как коллекцию объектов или JSON, в цикле сохраняйте в БД.

UPD.
В документации Symfony есть стандартный пример, как работать с коллекциями, через формы.
Вроде бы вот тут - https://symfony.com/doc/current/form/form_collecti... можно посмотреть.

Тут вам потребуется уже эмулятор браузера.
Можно взять, к примеру phantomjs - https://stackoverflow.com/questions/32531881/retri...
Можно попробовать работать через CefSharp.
Так или иначе, Вам потребуется JS функция, которая сработает при событии загрузки страницы и будет проверять факт того, что страница сформирована. Это можно сделать через тупой таймаут или же мониторить, появился ли тот или иной элемент.