Как получить значение из Hive при помощи Apache Spark?

mayton2019, Такого метода shema() в DataSet нету, есть только printSchema() она возвращает root |-- test.repr: string (nullable = true) |-- test.in_migration: decimal(1,0) (nullable = true) |-- test.iadr9: string (nullable = true) |-- test.auto_email: string (nullable = true) |-- test.profit_tp: decimal(5,0) (nullable = true) |-- test.edo_name3: string (nullable = true) |-- test.auto_fax: string (nullable = true) |-- test.inv_mail: string (nullable = true) |-- test.custmail: string (nullable = true)

Как получить значение из Hive при помощи Apache Spark?

mayton2019, Я прочитал что надо экранировать если есть символ . (df.select("" + columnName + "").show();)https://stackoverflow.com/questions/49032451/dataf...
но теперь другая проблема с приведением типов, decimal не конвертируется в double

df = df.withColumn("" + columnName + "", df.col("" + columnName + "").cast("double"));
df.select("" + columnName + "").show();

Ошибка org.apache.hive.jdbc.HiveBaseResultSet.getBigDecimal(HiveBaseResultSet.java:137) ~[hive-jdbc-3.1.2.jar:3.1.2]

Как получить значение из Hive при помощи Apache Spark?

mayton2019, root |-- test.repr: string (nullable = true) |-- test.in_migration: decimal(1,0) (nullable = true) |-- test.iadr9: string (nullable = true) |-- test.auto_email: string (nullable = true) |-- test.profit_tp: decimal(5,0) (nullable = true) |-- test.edo_name3: string (nullable = true) |-- test.auto_fax: string (nullable = true) |-- test.inv_mail: string (nullable = true) |-- test.custmail: string (nullable = true) ....

Как добавить в UriComponentsBuilder filter и --data-urlencode?

сергей кузьмин Вот лог curl
=> Send header, 489 bytes (0x1e9)
0000: GET /api/rest/v8/result/1589374/data+json?filter=%5B%7B%22columnN
0040: ame%22%3A%22test%22%2C%22condition%22%3A%22%3D%22%2C%22v
0080: alue%22%3A%22%D0%A1%D1%82%D0%B0%D1%86%D0%B8%D0%BE%D0%BD%D0%B0%D1
00c0: %80%D0%BD%D1%8B%D0%B5%20%D1%81%D0%B5%D1%82%D0%B8%20%D0%BF%D0%B5%
0100: D1%80%D0%B5%D0%B4%D0%B0%D1%87%D0%B8%20%D0%B4%D0%B0%D0%BD%D0%BD%D
0140: 1%8B%D1%85%22%7D%5D HTTP/1.1

Как добавить в UriComponentsBuilder filter и --data-urlencode?

Спасибо за ответы.
После того как запрос построится через UriComponentsBuilder он отправляется через restTemplate, методом get. Трассировку curl скину завтра сейчас сервер не работает.

ResponseEntity stringResponse;
try {
stringResponse = restTemplate.exchange(builder.toUriString(),
HttpMethod.GET,
entity,
String.class);
} catch (RestClientException e) {
return null;
}

Как добавить в UriComponentsBuilder filter и --data-urlencode?

такой возможности нету

Как добавить в UriComponentsBuilder filter и --data-urlencode?

сергей кузьмин, Не понятно как добавить вот эти строки(--data-urlencode
'filter=[{"columnName":"test","condition":"=","value":"Успешно"}]') из curl запроса в код

Как проверить в регулярном выражение ip адрес на java?

Спасибо работает как надо, только когда поле не заполнено ругается, прошлая регулярка((?=^(((25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)(\.)){3}(25[0-5](,|$)|2[0-4][0-9](,|$)|[01]?[0-9][0-9]?(,|$)?))*$)(?=^.{0,8000}[^,\s]$)|^$) не ругалась когда поле не было заполнено. Что надо добавить чтоб поле было не обязательным для заполнения?

Как сделать перевод русский букв в латиницу на typescript?

Lynn «Кофеман», Да на javascript примерно так будет, но у нас фронт на typescript)
function translit(str)
{
var ru=("А-а-Б-б-В-в-Ґ-ґ-Г-г-Д-д-Е-е-Ё-ё-Є-є-Ж-ж-З-з-И-и-І-і-Ї-ї-Й-й-К-к-Л-л-М-м-Н-н-О-о-П-п-Р-р-С-с-Т-т-У-у-Ф-ф-Х-х-Ц-ц-Ч-ч-Ш-ш-Щ-щ-Ъ-ъ-Ы-ы-Ь-ь-Э-э-Ю-ю-Я-я").split("-")
var en=("A-a-B-b-V-v-G-g-G-g-D-d-E-e-E-e-E-e-ZH-zh-Z-z-I-i-I-i-I-i-J-j-K-k-L-l-M-m-N-n-O-o-P-p-R-r-S-s-T-t-U-u-F-f-H-h-TS-ts-CH-ch-SH-sh-SCH-sch-'-'-Y-y-'-'-E-e-YU-yu-YA-ya").split("-")
var res = '';
for(var i=0, l=str.length; i {
var s = str.charAt(i), n = ru.indexOf(s);
if(n >= 0) { res += en[n]; }
else { res += s; }
}
return res;
}

Как проверить в регулярном выражение ip адрес на java?

сергей кузьмин, Ну не совсем так, из бэка(джава) запрашивается строка в котором находится регулярное выражение, а на фронте оно уже реализуется в конкретном поле.

Как проверить в регулярном выражение ip адрес на java?

Валидные строки
10.80.212.195
10.80.212.*
10.80.212.0-10.80.212.255
Не валидные все строки которые не относятся к ip адресу или октет больше 255
Например 10.82.212.300

Как устранить ошибку 0xC00000BB при подключение через smb?

Оказывается на сервере отключили NTLM аутенфикацию) А как без нее подключаться через JCIF?

Как устранить ошибку 0xC00000BB при подключение через smb?

А что починил не пишет)

Как устранить ошибку 0xC00000BB при подключение через smb?

Так там же он пишет что "Я сам его починил. Это ошибка JCIFS, и я сообщил об этом команде Jcifs."

Как убрать из json лишние тэги map и MyArrayList?

Cделал

Как убрать из json лишние тэги map и MyArrayList?

Максим, добавил код.

Как можно найти строку с учетом спец символа в java?

А как можно сделать если в пути будет обратный слэш одинарный или двойной если сетевой адрес

String path="\\home\book_store\magazine";
String pattern="\\home\book\magazine(|/.*)";

Как можно найти строку с учетом спец символа в java?

А все понял

String path="/home/book/magazine";
        String pattern="/home/book_store/magazine".concat("(|/.*)");

        if(path.matches(pattern)){
            System.out.println("find");
        }

Как можно найти строку с учетом спец символа в java?

Спасибо, не уточнил path и path2 приходят как параметры и book может содержатся например в таком виде String path2="/home/book/magazine/out"; Как можно применить паттерн (|/.*) ко всей строке?

Как покрыть тестом try/catch при помощи JUNIT4?

aol-nnov, А как сгенерировать исключение UnsupportedEncodingException в функции которую проверяю?