Как принимать необработанные данные?

Question

[Galdar Turin]

Честно сказать да же не знаю как назвать этот вопрос. Приходят данные от прибора, а при получении их и выводе в лог файл через NGINX и NET SOCKET вижу по разному.

NGINX выдает в виде - "\x01\x17\x80\x01\x96\x02\x18\x03864006049200006\x042\x00By" 400 157 "-" "-"
NET SOCKET так - <\Buffer 01 17 80 01 96 02 18 03 38 36 34 33 37 36 30 34 39 32 30 34 31 36 36 04 32 00 42 79\>

Хочу в NET SOCKET получать данные как в NGINX, просто потому что их так проще разбить на нужные части. При выводе Буфера получается все в строку и это совсем не удобно. Ответ получается 864006049200006By, а если он еще и перемешан или приходит в другом порядке, как понять что к чему.

Сами данные отправляются по протоколу tcp. Вот мой кривой кусок кода:

Кусок го*на

const PORT = 6020;
var  crc16  =  require ('js-crc').crc16;

var net = require('net');
var server = net.createServer();

var clients = [];

net.createServer( (socket) => {

socket.name = socket.remoteAddress + ":" + socket.remotePort;

clients.push(socket);

socket.on('data', (data) => {

    console.log(data)
    console.log(data.toString("utf8"))
    
    //broadcast(socket.name + " message: " + data, socket);
    console.log( crc16(data) )
    socket.write( crc16(data) );
    
});

socket.on('end', () => {
    
    console.log('end')
    clients.splice(clients.indexOf(socket), 1);

});

}).listen(PORT);

console.log(`TCP Server running at localhost port ${PORT}\n`);

Дайте совет или пример как мне получать адекватные заголовки и разбивать их. Чтобы можно было выстроить адекватную структуру получаемых данных.

Comments

[Сергей Сергей]

Чё за прибор?
Конкретно tcp-пакеты приходят без ошибок — так уж в tcp заведено. Если что-то перемешивается, то только прибором.

[Galdar Turin]

Сергей Сергей,
Чё за прибор? - трекер
Конкретно tcp-пакеты приходят без ошибок — так уж в tcp заведено - не понял, но данные приходят))
Если что-то перемешивается, то только прибором. - такое будет, данные будут перемешиваться 100%. Разные трекеры, разные данные

[Сергей Сергей]

Очевидно, документацию на приборы нужно достать и выведать протоколы работы. Дальше, буфер разбиваем на куски, из них получаем координаты и что ещё передаётся.

Ну, tcp/ip такой протокол, который на низком уровне проверяет целостность данных.

[Lynn «Кофеман»]

Вообще-то Buffer это и есть необработанные данные.

Разнице между nginx и node лишь в разном способе вывода этих данных в виде строки текста.

Answer 1

[Robur]

вы можете использовать Buffer.toString() с нужной кодировкой чтобы получить строку.
например Buffer.toString('hex') выдаст вам '0117800196...', каждые две цифры - один байт.
или другие кодировки попробуйте, если так не устраивает.
но вообще работать лучше с данными в их первоначальном виде - с числами. вместо '\x01' вы берете первый байт и получаете 1. вместо "\x0386400604920000" вы берете байты попорядку и получаете 3 86 40 06 04 и тд.
Это куда удобнее, чем пытаться разбирать строку, которая случайно получилась из этих данных.
Если хотите прямо вот 1в1 как в nginx, то найдите как оно там форматируется и напишите такое же. Вопрос зачем конечно остается.

Comments

[Galdar Turin]

Robur, а можно попросить поподробней, не могу понять.

// Вот я получаю данные
data.toString('hex') //01108003383639323434303430303034313135d5ed

// Если разбить на каждые две цифры то получается
data.toString('hex').match(/.{1,2}/g)
/*
[
  '01', '10', '80', '03',
  '38', '36', '39', '32',
  '34', '34', '30', '34',
  '30', '30', '30', '34',
  '31', '31', '35', 'd5',
  'ed'
]
*/

Я не совсем понимаю, а как по байтово прочитать строку которую отдает data.toString('hex')

И по поводу первоначального вида, да, это круто, но как мне получить первоначальный вид, если он выдает уже в буфере?

Если можно раскрыть ответ, просто вам то это может быть понятно, а я шот совсем не допираю как это работает

[Robur]

Galdar Turin, буфер это и есть первоначальный вид - бинарные данные. То что вы выводит nginx это просто его попытка эти бинарные данные вывести как-нибудь как текст.

чтобы побайтово читать данные, вам не надо переводить в строку, у вас там уже байты.

data[1] - первый байт, data[2] - второй.

Прочитайте документацию по Buffer https://nodejs.org/api/buffer.html
или более конкретно - https://nodejs.org/api/buffer.html#buffer_buf_index

[Galdar Turin]

Robur, отлично, огромное спасибо.
Сможет помочь с этим заданием, я не совсем понимаю как правильно сделать.

Я получил данные d5ed и их нужно отправить с заголовком. Я формирую буфер и записываю их туда, но как я понял это не правильно. Да и если читать из буфера то что я записал, результат совсем не такой.
Писал я так:

let buff = d5ed
new Buffer.from('02'+buff )
new Buffer.from(buff )

Мне кажется пишу полный брет, но я пытаюсь научится, в документации не нашел по поводу отправки данных с заголовком

[Galdar Turin]

Robur, получилось, забывал написать hex new Buffer.from(buff, 'hex' )