Как в swift преобразовать кодироку строки?

Question

[Антон Кокарев]

Используя iOS библиотеку Alamofire отправляю на сервер строку. По-умолчанию Alamofire использует кодировку utf-8, сервер ожидает получить cp1251. В итоге кириллица становится нечитаемой.
Подскажите, как правильно отправить строку в котировке cp1251?

let url = "https://greatcomments.server/add"
let parameters = ["comment": "Проверка"]
let headers = ["Content-Type": "application/x-www-form-urlencoded; charset=windows-1251"]
Alamofire.request(url, method: .post, parameters: parameters, encoding: URLEncoding.default, headers: headers)

Answer 1

[doublench21]

let str = "Привет Как дела"  // Внутренняя кодировка Свифта utf-32

let cp1251Data = str.data(using: .windowsCP1251) 
let utf8Data = str.data(using: .utf8)

cp1251Data.count // 15
utf8Data.count // 28

// ***********************************

let session = URLSession.shared
var URL = URL(string: "https://greatcomments.server/add")!
var request = URLRequest(url: URL)
request.httpMethod = "POST"
    
 // Headers
request.addValue("application/x-www-form-urlencoded; charset=windows-1251", forHTTPHeaderField: "Content-Type")

// Form URL-Encoded Body 
let bodyParameters = [
     "comment": "Проверка",
]
let bodyString = bodyParameters.queryParameters
request.httpBody = bodyString.data(using: . win1251, allowLossyConversion: true)

let task = session.dataTask(with: request, completionHandler: { (data: Data?, response: URLResponse?, error: Error?) -> Void in
      if (error == nil) {
        // Success
        let statusCode = (response as! HTTPURLResponse).statusCode
        print("URL Session Task Succeeded: HTTP \(statusCode)")
      }
      else {
        // Failure
        print("URL Session Task Failed: %@", error!.localizedDescription);
      }
    })
task.resume()
session.finishTasksAndInvalidate()


// ***********************************

protocol URLQueryParameterStringConvertible {
  var queryParameters: String {get}
}

extension Dictionary : URLQueryParameterStringConvertible {
  var queryParameters: String {
    var parts: [String] = []
    for (key, value) in self {
      let part = String(format: "%@=%@",
                        String(describing: key).win1251Encoded,
                        String(describing: value).win1251Encoded)
      parts.append(part as String)
    }
    return parts.joined(separator: "&")
  }
  
}

extension URL {
  func appendingQueryParameters(_ parametersDictionary : [String: String]) -> URL {
    let URLString : String = String(format: "%@?%@", self.absoluteString, parametersDictionary.queryParameters)
    return URL(string: URLString)!
  }
}

// Раньше Swift(Foundation) позволял любую строку закодировать в url-encode в любой кодировке. 
// Сейчас же де факто это можно лишь сделать в utf-8. 
// Видимо Apple аргументирует это тем,  что utf-8 - это стандарт в вебе. 

// Да всех остальных случаев нужно писать такую функцию самому. 
// Ниже кодировка в url-encode в windows-1251

extension CharacterSet {
  static let rfc3986Unreserved = CharacterSet(charactersIn: "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789-._~=&+")
}

extension String.Encoding {
  static let win1251 = String.Encoding(rawValue: CFStringConvertEncodingToNSStringEncoding(CFStringEncoding(CFStringEncodings.windowsCyrillic.rawValue)))
}

extension String {
  func addingPercentEncoding(withAllowedCharacters characterSet: CharacterSet, using encoding: String.Encoding) -> String {
    let stringData = self.data(using: encoding, allowLossyConversion: true) ?? Data()
    let percentEscaped = stringData.map {byte->String in
      if characterSet.contains(UnicodeScalar(byte)) {
        return String(UnicodeScalar(byte))
      } else if byte == UInt8(ascii: " ") {
        return "+"
      } else {
        return String(format: "%%%02X", byte)
      }
      }.joined()
    return percentEscaped
  }
  
  var win1251Encoded: String {
    return self.addingPercentEncoding(withAllowedCharacters: .rfc3986Unreserved,  using: . win1251)
  }
}

Comments

[Igor Cherny]

наверное всё таки:

let str = "Привет Как дела"  // Внутренняя кодировка Свифта utf-32

let cp1251Data = str.data(using: .windowsCP1251) 
let utf8Data = str.data(using: .utf8)

[doublench21]

Igor Cherny, так и есть, пардон

[Антон Кокарев]

let str = "Проверка"
let cp1251Data = str.data(using: .windowsCP1251)
let parameters = ["comment": cp1251Data]
let headers = ["Content-Type": "application/x-www-form-urlencoded; charset=windows-1251"]
Alamofire.request(url, method: .post, parameters: parameters, encoding: URLEncoding.default, headers: headers)

На сервере вместо текста "Проверка" появляется текст "8 bytes". Видимо сырые данные нужно еще как-то обернуть?

Все что Вы написали ниже первых звездочек не относится к Alamofire. Мне бы хотелось все-таки использовать именно его.

[doublench21]

akokarev, не пользуюсь Alamofire, не могу сказать. Всегда использую нативный URLSession.

let headers = ["Content-Type": "application/x-www-form-urlencoded; charset=windows-1251"] это Вам не поможет. Проблема в том, что Alamofire сам внутри себя делает так:

request.httpBody = bodyString.data(using: .utf8, allowLossyConversion: true)

[Антон Кокарев]

doublench21, спасибо за помощь. Задал вопрос разработчикам Alamofire. Но видимо придется изучать URLSession.

[Антон Кокарев]

Попробовал Ваш способ - всеравно на сервере белиберда. Ровно такая же как и с Alamofire. Видимо не конвертирует строка

request.httpBody = bodyString.data(using: .windowsCP1251, allowLossyConversion: true)

в нужную кодировку, либо где-то обратно в utf8 превращается

[doublench21]

akokarev, вряд ли это проблема в этом. Ваш сервер вообще принимает откуда-то нормально сообщения в cp1251? Какой запрос приходит на сервер? Какие заголовки?

[Антон Кокарев]

doublench21, к сожалению сервер не мой, а компании, не могу посмотреть что приходит. Но судя по html форме, которую я пытаюсь эмулировать, сервер принимает cp1251. Судя по записавшимся крякозябрам, проблема в кодировках cp1251-utf8.
Смотрел заголовки, отправляемые в Google Chrome, там в заголовках charset=windows-1251

[doublench21]

akokarev, посмотрите в Chrome ещё раз этот запрос и во вкладке Network скопируйте его как Curl. Скиньте сюда. (Ну это, если конфиденциальность позволяет)

[Антон Кокарев]

doublench21,

curl 'https://bill.SERVER.ru/?mod=tick&act=editticket&show=noheader&tickid=128056' -H 'Connection: keep-alive' -H 'Cache-Control: max-age=0' -H 'Origin: https://bill.SERVER.ru' -H 'Upgrade-Insecure-Requests: 1' -H 'Content-Type: application/x-www-form-urlencoded' -H 'User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36' -H 'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8' -H 'Referer: https://bill.SERVER.ru/?mod=tick&act=editticket&show=noheader&tickid=128056' -H 'Accept-Encoding: gzip, deflate, br' -H 'Accept-Language: en-GB,en-US;q=0.9,en;q=0.8,ru;q=0.7' -H 'Cookie: PHPSESSID=075339-SECRET-c3e0e3a02' --data 'clearid=%C0%ED%F2%EE%ED&equipmentid=&objectid=&resolv_date=&ticketgroup=11&resolv_adm=38&newticktext=%F2%E5%F1%F2&save=%D1%EE%F5%F0%E0%ED%E8%F2%FC+%E8%E7%EC%E5%ED%E5%ED%E8%FF' --compressed

В заголовке страницы с формой есть это:

<meta http-equiv="Content-Type" content="text/html; charset=windows-1251">

Сама форма маленько разбросана по таблице, но вот основные ее части:

<form method="POST" name="editticket"></form>
<select name="clearid"><option>Антон</option><option value="4775">=убрать=</option></select>
<textarea style="height:100px; width: 100%;" name="newticktext"></textarea>
<input type="submit" name="save" value="Сохранить изменения">

[doublench21]

akokarev, дополнил ответ. Пробуйте.

[Антон Кокарев]

doublench21, работает!
Спасибо. и низкий поклон Вам!

String(describing: key). win1251Encoded и строка ниже лишний пробел.

[doublench21]

akokarev, Поправил. Обращайтесь.

[PutkovDimi]

doublench21 Здравствуйте,
Возникла похожая проблема: нужно отправлять на сервер русские символы, а они преобразовываются в билиберду, вот какие данные отправляю:

и вот что видит сервер(респонс возвращает строку назад):


Я пробовал отправлять в кодировке win1251, как вы предложили, но ничего не вышло, вся та же проблема, единственное, что символы в query отображаются по-другому.
На андройде(Java) все ок, отправляется в формате utf16, а как можно отправить на сервер в таком формате на Swift?

Заранее благодарю!

[Антон Кокарев]

PutkovDimi, советую открыть отдельный вопрос/тему.
На сколько я понял, у Вас проблема с экранированием символов, а не со сменой кодировки - как бы разные вещи...