Проблемы с кодировкой при работе с VKontakte API через Java и GSON?

Question

[ideas4ru]

Всем привет!


Написал код на яве, чтобы получать имя пользователя Вконтакте с заданным uid.

String request = "https://api.vk.com/method/users.get?uids=" + 1 + "&fields=first_name,last_name&access_token=" + accessToken; //для Павла Дурова
		
		try {
			URL url = new URL(request);
			HttpsURLConnection con = (HttpsURLConnection)url.openConnection();
			BufferedReader inReader = new BufferedReader(new InputStreamReader(con.getInputStream()));

			String inputLine;
	        while ((inputLine = inReader.readLine()) != null) {
	        	int beginIndex = inputLine.indexOf('[');
			int endIndex = inputLine.indexOf(']');
			inputLine = inputLine.substring(beginIndex + 1, endIndex);
	                 VKPerson vkPerson = new Gson().fromJson(inputLine, VKPerson.class);
	        	System.out.println(vkPerson);
	        }

	        inReader.close();
		} catch (Exception e) {
			e.printStackTrace(System.err);
		}

Класс VKPerson для GSON:

public class VKPerson {
	private Integer uid;
	private String first_name;
	private String last_name;

	public Integer getUid () {return uid;}
	public String getFirst_name () {return first_name;}
	public String getLast_name () {return last_name;}

	public void setUid (Integer uid) {this.uid = uid;}
	public void setFirst_name (String first_name) {this.first_name = first_name;}
	public void setLast_name (String last_name) {this.last_name = last_name;}

	public String toString () {
		//TODO: charset conversion
		return String.format("uid: %d; first_name: %s; last_name: %s", uid, first_name, last_name);
	}
}

В итоге строчка-ответ выглядит так

{«response»:[{«uid»:1,«first_name»:"Павел",«last_name»:"Дуров"}]}

а VKPerson печает

uid: 1; first_name: Павел; last_name: Дуров


Знаю, что надо сконвертировать данные из cp-1251utf-8, в которой ВК отдает русские имена. Но видимо это уже надо делать после работы Gson().fromJson. Но тогда из каждого символа изначальной строчки получается два байта в строках класса VKPerson.

Answer 1

[Moxa]

скорее всего проблема тут

BufferedReader inReader = new BufferedReader(new InputStreamReader(con.getInputStream()));

выставите для InputStreamReader необходимую кодировку

Comments

[ideas4ru]

BufferedReader inReader = new BufferedReader(new InputStreamReader(con.getInputStream(), Charset.forName("windows-1251")));

Сделал вот так в соответствии с именем кодировки тут

Но не работает, только уже по-другому
{«response»:[{«uid»:1,«first_name»:"???°???µ?»",«last_name»:"?”????????"}]}
uid: 1; first_name: ???°???µ?»; last_name: ?”????????

Answer 2

[Moxa]

вы уверены, что там кодировка cp1251? что-то мне подсказывает, что все-таки utf-8

Comments

[Moxa]

шит, не туда ткнул(

[ideas4ru]

Вы правы, посмотрел через плагин Chrome, что там все-таки utf-8, хотя на каком-то форуме видел, что cp-1251.

BufferedReader inReader = new BufferedReader(new InputStreamReader(con.getInputStream(), Charset.forName("UTF-8")));

Но так тоже не правильно печает. Где-то прочитал, что ява кодирует символ двумя байтами, а utf-8 это один байт, может в этом проблема…

[Moxa]

utf-8 использует от одного до четырех байт на символ

[Moxa]

а куда вы все это выводите? в виндовую консоль?

[ideas4ru]

в эклипсе в консоль, вроде он умеет показывать русские буквы

[Moxa]

где-то косяк, но у меня нет под рукой винды, чтобы проверить(

[barker]

что именно неправильно печатает? так должно работать как написали. в дебагере тоже неправильно показывает? причём тут как кодирует java, вам главное полученные байты интерпретировать как нужно.

[ideas4ru]

В дебагере нормально показывалось — не догадался проверить. Оказывается проблема была в настройках консоли.
www.mkyong.com/java/how-to-display-chinese-character-in-eclipse-console/

Теперь все нормально печатается:
{«response»:[{«uid»:1,«first_name»:«Павел»,«last_name»:«Дуров»}]}
uid: 1; first_name: Павел; last_name: Дуров