Парсер сайта на Mono. С чего начать??

Question

[Pan Propan]

Есть желание написать простенький парсер конкретного сайта. Хочется сделать на Mono, почему?? А не знаю.
Подскажите естьли готовая библиотека для этой цели??

Answer 1

[Сергей Родюшкин]

Mono? Это кроссплатформенный аналог (почти) .NET Framework, только и всего. В принципе, если вы делаете простое консольное приложение без завязки на какие-то ресурсы, специфичные для Windows, чаще всего оно, будучи собрано в Visual Studio, будет и под Mono работать, и наоборот.
Наличие готовой библиотеки сильно зависит от того, какие именно данные вы хотите доставать. Для разбора HTML порекомендую пакет SGMLReader. Есть еще HTML Agility Pack, как вариант.
Для работы с HTTP есть средства самой платформы — например, HttpClient или более старый HttpWebRequest.

Comments

[Pan Propan]

Я дома сижу под линукс обычно, а на работе в силу специфики приходится под виндой маяться. Приложение пишется для личных нужд, а значит должно быть кросплатформенным, то есть работать на линуксе и в винде.

Данные хочу получать по этой ссылке muslimsalat.com/daily.json.
Там на выходе JSON, который требуется обработать и вывести на экран.

[Сергей Родюшкин]

А, ну вам тогда не сайт парсить, а JSON — для этого есть библиотека JSON.NET, её должно хватить с головой. Под Mono работает замечательно.

[Сергей Родюшкин]

А в качестве IDE дома можете поставить MonoDevelop.

[Pan Propan]

Сергей Родюшкин: спасибо за ссылку. не подскажите а каким образом подключаются, внешние библиотеки в Mono?

[Pan Propan]

Сергей Родюшкин: у меня она и стоит на Ubuntu

[Сергей Родюшкин]

В актуальных версиях MonoDevelop (5.x) — как и в студии, установкой пакета через NuGet. Если у вас версия 4.0, можно попробовать эту инструкцию.

[Pan Propan]

Сергей Родюшкин: установил, но к сожалению не могу найти примера как по http ссылке получить JSON

[Сергей Родюшкин]

Не вопрос, здесь есть целых два варианта. Последний, с HttpClient, лично мне больше нравится.

Answer 2

[Pan Propan]

Сергей Родюшкин: Использовал библиотеку https://github.com/ezaurum/http-client .

Пробую так

using Gtk;
using System;
using Ezaurum.Http.Client;
using System.Net;

class Hello
{
	static void Main ()
	{

		HttpRequestUtils object1 = new HttpRequestUtils();
		Json_data = HttpRequestUtils.GetJson('http://muslimsalat.com/daily.json?key=319b6e0c9e5d35b7d5dd8455ddbcf90e');

	}
}

В описании метода сказано.
using System;
using System.Net;

public static bool GetJson<TRes> (this Uri uri, out TRes response, out HttpStatusCode code, out string jsonResult, string authorization = null);

Как правильно применить метод??

Comments

[Сергей Родюшкин]

Эмм, вы написали некорректный, с точки зрения C#, код. Думаю, для начала вам стоит поучить сам язык на более простых примерах. В частности, приведенный вами метод является расширением для объекта типа System.Uri и имеет два out-параметра — десериализованный ответ и статус ответа. Даже если учесть, что методы-расширения можно вызывать, как обычные статические, вы первым аргументом подаете в него строку, которая к Uri не приводится. А про остальные два параметра вы вовсе забыли.
Вот здесь есть пример, похожий на ваш. Код там не то чтобы расчудесный, но путь решения исходной задачи поможет понять.