Выбор способа сжатия строки на строне клиента (js) и распаковки на стороне сервера (python)?

Question

[Евгений Попов]

Подскажите, может кто встречался с решением проблемы. Была найдена вот такая библиотека dankagai deflate. При попытки воспользоваться zlib или gzip модулями python выходит, что данные в неком “ином формате”, чем подходящие для работы с данными модулями. Единственный вариант который я нашел так — это переписать функцию inflate из данной библиотеки с js на python.

Начал копать в сторону алгоритмов которые используются на “сервисах сокращения ссылок”, но судя по найденной информации принцип работы в них несколько иной, но могу ошибаться. Хотелось бы узнать о примерах реализации и/или направлении в какую сторону двигаться в поисках решения.

Answer 1

[Анатолий]

На сколько она хорошо сжимает, на сколько у Вас большие данные, и стоит ли оно того?

Comments

[Евгений Попов]

нужно передать до ~2000 символов, ограничения get запроса.
Объем не сжатых данных естественно, чем больше тем лучше.
При передаче, данные так же кодируются в base64.

[AxisPod]

Совершенно неправильный подход, а если данные после сжатия все равно не влезут в get запрос, что вы будете делать? Я думаю в данном случае надо откзываться от get и использовать post.

[Анатолий]

Если Вам нужны кроссдоменные передачи данных, то я это делал несколькими запросами, бил нужную строку и слал все с уникальными ключами (?key[x]=some_text_part1 ...)

[Евгений Попов]

AxisPod, что значит «Совершенно неправильный подход» если вы не знаете для «чего». Необходим именно get, если бы post'ом можно было бы отправлять «адекватно» кросс-доменный ajax запрос, то и проблем не было бы.

taliban, да именно так и собираюсь.

[Евгений Попов]

taliban, но хотелось бы найти адекватный способ за один запрос отправлять как можно больше данных которые уже потом при необходимости «склеивать».

Answer 2

[equand]

Включите отдачу питоном deflate хедера на компрессию и если клиент (браузер) поддерживает, а он поддерживает (Accept-Encoding хедер), включайте, если мне не изменяет память zlib.compress на http data
У меня все именно так проходит и работает без проблем в проекте выдающем json api

Comments

[Евгений Попов]

Немного не понял вашего предложения, переформулирую свой вопрос: необходимо передать в питон строку get'ом, например:
Lorem Ipsum is simply dummy text of the printing and typesetting industry. Lorem Ipsum has been the industry's standard dummy text ever since the 1500s.

Но чтобы она была сжата на стороне клиента до меньшего количества символов и раскодирована на стороне сервера в исходный текст.

[Aleks]

я так понял, что предыдущий коментатор имеет ввиду, что переложить это на браузер и встроенный XMLHTTPREquest.

[Евгений Попов]

Другими словами вы хотите сказать что отдав соответствующий хедер при get запросе к серверу например ie сможет передать в запросе(только get) больше(значительно?) чем 2048 символов на сервер? Я вас правильно понял?
PS проверить появиться возможность только через несколько часов по этому и уточняю.

Answer 3

[Ruslan_Y]

Посмотрите, кажется то что вам нужно (алгоритм LZJB):
code.google.com/p/jslzjb/ и для python code.google.com/p/pylzjb/

Comments

[Евгений Попов]

Спасибо за ссылки. Обязательно сегодня посмотрю, все обыскал и google code и git, а эти либы так и не встречал. Видимо так как начал копать в сторону lz только сегодня утром, а до этот «заморачивался» в сторону deflate.

[Ruslan_Y]

Посмотрите вот еще такой УРЛ: stackoverflow.com/questions/294297/javascript-implementation-of-gzip
тут приводятся несколько вариантов разных алгоритмов

[Евгений Попов]

Серверная сторона на GAE pylzjb, а данная либа распространяется как pyd и so, как оказалось к сожалению, судя по гуглу, нет возможности ее подключить там.

Answer 4

[akzhan]

stackoverflow.com/questions/298745/how-do-i-send-a-cross-domain-post-request-via-javascript

Comments

[Евгений Попов]

Как я уже писал ранее post запрос через тот же iframe — это скорей «хак», а не решение задачи.

[akzhan]

Другого способа общедоступного нет. Можно использовать кроссдоменные запросы еще через Flash с policy, или современные HTML5 API.