Как получить значение из Hive при помощи Apache Spark?

Смотри. Есть какая-то невнятная проблема на стороне hive. Толи нет таких полей толи они пишутся как-то по другому. Тебе надо взять hive-client и подключится и посмотреть какие есть таблицы и поля.

Вот пример подключения через утилиту beeline.

https://cwiki.apache.org/confluence/display/Hive/H...

Как получить значение из Hive при помощи Apache Spark?

Я не понимаю что ты щас делаешь.

У тебя была ошибка на первом скрине
cannot resolve 'test.repr'
Нет поля.

Я тебе предложил посмотреть схему твоего датафрейма чтоб узнать какие есть поля. Вместо этого ты пошел в стековер
и написал безсмысленный код где ты пустые строки с чем-то конкатенируешь.

Как получить значение из Hive при помощи Apache Spark?

Странно. Кажется что вот до этой строки у тебя все было нормально.
for (String columnName: df.columns())

А что в ней происходит? Я вот для того чтобы получить схему вызываю метод схема.
df.schema()
P.S. Еще мне трудно синхронизировать свои знания с этим сорсом. Я пишу на Scala/Python а ты выбрал не самый удобный язык.

Как получить значение из Hive при помощи Apache Spark?

Что у тебя покажет
df.printSchema()
?

Чем открыть .Jet?

mr_brains, ;не запустить. Тебе надо точно идентифицировать формат файла. Потому что под расширением jet есть несколько разных типов.

Вот тут читай

https://fileinfo.com/extension/jet

Пишут что это Access но я не верю. Я сначала смотрю в заголовок файла что и тебе предлагаю.

Чем открыть .Jet?

По одному extension нельзя судить правильно о формате. В наше время есть много дублей форматов.
Попробуй посмотри что в заголовке файла. Вот например как я смотрю на sqlite:

$ hexdump -C -n 64 demo.db
00000000  53 51 4c 69 74 65 20 66  6f 72 6d 61 74 20 33 00  |SQLite format 3.|
00000010  10 00 01 01 00 40 20 20  00 00 00 01 00 00 02 3d  |.....@  .......=|
00000020  00 00 00 00 00 00 00 00  00 00 00 01 00 00 00 04  |................|
00000030  00 00 00 00 00 00 00 00  00 00 00 01 00 00 00 00  |................|

Или найди хекс-редактор и посмотри что видно.

Как будет более оптимизировано нанести текстуру?

Я-бы просто использовал первый вариант и не парился. Самое простое решение - обычно самое правильно и не несет багов.

Во времена OpenGL были опции сжатия текстур. Там по сути RBG сводился к палитровому. Не знаю как щас в игровых технологиях используют или нет. Но в сыром виде 512 * 512 * 4 = 1 мегабайт.

Это ниочем. Значит в 1 гигабайт можно положить 1000 таких текстур.

Какую роль играют float и double в скобках?

Несколько мыслей.

Я-бы по возможности избегал всяких type coercion и писал-бы явно константу того типа которая нужна.
например вместо 1 можно писать 1.0. С нас не убудет. Но по крайней мере декларируем явно что вещесвтенное.

Почему эпсилон - это дистанция именно от единицы до единицы + эпсилон. Я не уверен что единица - здесь подходящая стартовая точка. По крайней мере это требует обсуждения.

Как достать из OpenStreetMap все населённые пункты с населением более 4000?

Интересно. Я не знал что в OpenStreetMap есть сведенья о популяции. Спасибо.

Как зашифровать exe файл?

DKENdhdhdasd, я пас. Я не знаю как это сделать. Но мне любопытно что за такая государственная или служебная тайна лежит в твоем файле что ты так далеко полез?

Как эффективно подсчитать кол-во байт для выделения буфера на чтение?

yxtiblin, можно читать по 1 символу (минимальный буфер) и вести накопление числа по принципу десятчной системы.

Или действовать как предлагает стековервлоу https://stackoverflow.com/questions/38684841/readi...

Я-бы на твоём месте простов взял второй вариант и не парился. В эпоху гигабайтной памяти глупо экономить 600 килобайт.

Как зашифровать exe файл?

Антивирусные средства все равно увидят ваш исполнимый код.

Я присоединяюсь к вопросу о цели шифрования. Если мы поймем цель и поймем от кого вы что прячете - то тогда будут советы как решить проблему. Если вы просто хотите спрятать пароль то для этого не нужно шифровать все тело экзешника.

Как эффективно подсчитать кол-во байт для выделения буфера на чтение?

yxtiblin, форум не может понять какой буфер тебе нужен.
Для того чтоб загрузить в память 100 тысячи целых чисел типа (int32)
ты и должен аллоцировать массив на сто тысяч. И нечего здесь мудрить.

Если числа представлены изначально в виде текстового файла - то мы должны знать
формат как они представлены чтобы его распарить нормально. В 99% случаев
это будет последовательность разделенная переводами строк

99999
55555
11111
0

Как эффективно подсчитать кол-во байт для выделения буфера на чтение?

На пробел в соответствии с таблицей ascii требуется 2 байта.

Почему два байта?

Почему в играх низкий фпс и сильно фризит при более-менее нормальном железе?

GunDevi1, практически во всех видеокартах есть эффект когда чем выше разрешение - тем меньше FPS.

Если ты на своем металлоломе поставишь 4К - я думаю у тебя скорость упадет до 10 fps.

И ты лучше не будь упрямый а просто попробуй. И приходи сюда и говори что я был не прав.

Почему в играх низкий фпс и сильно фризит при более-менее нормальном железе?

Поставь меньше разрешение экрана.

Как посчитать площадь лунной орбиты?

My1Name, ну ОК.

Как посчитать площадь лунной орбиты?

Такую-же площадь имеет квадрат в космосе со стороной равной 247967.0

Тоесть чуть-меньше перигелия. Это - похоже на правду?

Как посчитать площадь лунной орбиты?

Ну вот по твоей формуле.
Я пишу на другом языке но суть - таже. Вещественные числа и Пи одинаковые.
Кстати проверь почему фокус - отрицательный. Должно ли так?

scala> val perigee : Double = 363300.0
val perigee: Double = 363300.0

scala> val apogee : Double = 40418.0
val apogee: Double = 40418.0

scala> val bigAxis = (apogee+perigee)/2.0
val bigAxis: Double = 201859.0

scala> val focus = (apogee-perigee)/2.0
val focus: Double = -161441.0


scala> val littleAxis = Math.sqrt(apogee*perigee)
val littleAxis: Double = 121176.97553578402

scala>

scala> val area = Math.PI * (bigAxis+littleAxis) * Math.sqrt(apogee*perigee) / 2.0
val area: Double = 6.14880721644881E10

Итого площадь
61488072164.488100

Как посчитать площадь лунной орбиты?

Переведи все типы в double.

Этож астрономия мать ево. А не комьютерная игра.