Как раскодировать строку байтов на python?

Question

[lavrenkov-sketch]

Изначально сокет отправляет питону

14:46:37:820 отправлено: 33 байт
 7e 41 01 00 00 00 00 00 10 1d 43 a1 5f 01 1d 43
 a1 5f 30 c4 55 01 f0 a8 fb 01 00 00 00 00 00 00 e4

~A  Size = 1
numPage = 0  Code = 4096  Time = 1604403997  StateGauge = 1  LastTime = 1604403997  Lat = 22398000  Lon = 33270000  Speed = 0  Course = 0

В сам питон приходит

b'~A\x01\x00\x00\x00\x00\x00\x10\x1dC\xa1_\x01\x1dC\xa1_0\xc4U\x01\xf0\xa8\xfb\x01\x00\x00\x00\x00\x00\x00\xe4'

Код питона:

spoiler

import socket
import re

# Задаем адрес сервера
SERVER_ADDRESS = ('localhost', 8686)

# Настраиваем сокет
server_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
server_socket.bind(SERVER_ADDRESS)
server_socket.listen(10)
print('server is running, please, press ctrl+c to stop')

# Слушаем запросы
# Особенности протокола
while True:
    connection, address = server_socket.accept()
    print("new connection from {address}".format(address=address))
# Соединение всегда инициализирует навигатор, через handshake  мы должны ему сразу ответить!
#	0x40, 0x4e, 0x54, 0x43, 0x00, 0x00, 0x00, 0x00, 0x01, 0x00, 0x00, 0x00, 0x03, 0x00, 0x45, 0x5e,0x2a, 0x3c, 0x53,
#    connection.send(bytes('@NTC\x40\x4e\x54\x43\x00\x00\x00\x01\x00\x00\x00\x03\x00\x45\x5e*<S', encoding='UTF-8'))

#Согласование протокола  FLEX v1
#protocol answer
#0x40, 0x4e, 0x54, 0x43,0x00,0x00,0x00, 0x00, 0x01, 0x00, 0x00, 0x00, 0x09, 0x00, 0xb1, 0xa0, 0x2a, 0x3c, 0x46, 0x4c, 0x45, 0x58, 0xb0, 0x0a, 0x0a,
#    connection.send(bytes('x40\x4e\x54\x43\x00\x00\x00\x00\x00\x01\x00\x00\x00\x09\x00\xb1\xa0\x2a\x3c\x46\x4c\x45\x58\xb0\x0a\x0a', encoding='UTF-8'))
    
    while 1:
        data = connection.recv(8192)
        print(data)
        results = [
            dict(re.findall(r"(\d{4})([\d.]+)", string))
            for string in filter(
            bool,  # non-empty
            data.decode('ascii', 'ignore').split("&&"),
        )
        ]
        print(data.decode('ascii', 'ignore'))
        print(data.decode('cp866'))

В чём моя ошибка, или это какие-то не те байты?)

Answer 1

[Александр]

Используйте struct.unpack() это лучший друг всех реверсинженеров.

a = b'\x7e\x41\x01\x00\x00\x00\x00\x00\x10\x1d\x43\xa1\x5f\x01\x1d\x43\xa1\x5f\x30\xc4\x55\x01\xf0\xa8\xfb\x01\x00\x00\x00\x00\x00\x00\xe4'
Size,numPage,Code,Time,StateGauge,LastTime,Lat,Lon,Speed,Course, = struct.unpack("<2xBIHIBIIIHH",a[:30])

Comments

[lavrenkov-sketch]

Как мне применить его, если я не знаю как оно закодировано?

[Александр]

Как же ты не знаешь если у тебя есть все переменные в логах?
https://docs.python.org/3/library/struct.html
открываешь косоль и пробуешь кодировать циферки и ищешь их место в пакете, у меня все просто декодировалось:

Python 3.7.0 (v3.7.0:1bf9cc5093, Jun 27 2018, 04:06:47) [MSC v.1914 32 bit (Intel)] on win32
Type "copyright", "credits" or "license()" for more information.
>>> "%x"%22398000
'155c430'
>>> a = b'\x7e\x41\x01\x00\x00\x00\x00\x00\x10\x1d\x43\xa1\x5f\x01\x1d\x43\xa1\x5f\x30\xc4\x55\x01\xf0\xa8\xfb\x01\x00\x00\x00\x00\x00\x00\xe4'
>>> len(a)
33
>>> "%x"%33
'21'
>>> "%x"%4096
'1000'
>>> "%x"%1604403997
'5fa1431d'
>>> import struct
>>> struct.unpack("<7xHI",a[:13])
(4096, 1604403997)
>>> struct.unpack("<7xHII",a[:17])
(4096, 1604403997, 2705530113)
>>> struct.unpack("<7xHIBI",a[:18])
(4096, 1604403997, 1, 1604403997)
>>> struct.unpack("<7xHIBII",a[:22])
(4096, 1604403997, 1, 1604403997, 22398000)
>>> "%x"%33270000
'1fba8f0'
>>> struct.unpack("<7xHIBIII",a[:26])
(4096, 1604403997, 1, 1604403997, 22398000, 33270000)
>>> Size,numPage,Code,Time,StateGauge,LastTime,Lat,Lon,Speed,Course, = struct.unpack("<2xBIHIBIIIHH",a[:30])
>>> [Size,numPage,Code,Time,StateGauge,LastTime,Lat,Lon,Speed,Course]
[1, 0, 4096, 1604403997, 1, 1604403997, 22398000, 33270000, 0, 0]
>>>

я не уверен в размерности Size,numPage,Speed,Course - придется править в процессе отладки - возможно Spped будет I вместо H - нужен пакет с ненулевыми значениями.