Как верно распарсить в python данную строку?

Question

[User .]

Вечер добрый,
есть массив данных следующего формата, подскажите как верно получить доступ к его элементом посредством python.

Пробую так:

#!/usr/bin/env python
import json

j = json.loads(JSONDATA)
print (j['hashmap'][0])

{u'hashmap': [{u'hash': u'6d3f4796275bb54c21a33b82f399cc6d', u'key': u'assessment'}, {u'hash': u'601892ece72be3be2f57266ca2354792', u'key': u'bulletinFamily'}, {u'hash': u'a173072793578541ea04b7baa0323592', u'key': u'cpe'}, {u'hash': u'ab861885dbe02d09a3a2208dd9731d62', u'key': u'cvelist'}, {u'hash': u'3c236091754d2db00c1c42f811b3ada4', u'key': u'cvss'}, {u'hash': u'304c200bf4a637f269c9acaf5f79c209', u'key': u'description'}, {u'hash': u'0e53d0deb991b66bb6a7a414e375241c', u'key': u'href'}, {u'hash': u'94ef3fc1d42d02bbb210dabce65fc771', u'key': u'modified'}, {u'hash': u'104e09b5ff5b1ce3bc17f5fe64295116', ]

Answer 1

[JRazor]

А что нужно то? Если я правильно понял, то тут просто нужно преобразовать данные:

j = json.loads(JSONDATA)
data = dict([(v['key'], v['hash'])for v in j['hashmap']])

В итоге key станет ключом, а hash - значением:

{
   'assessment': '6d3f4796275bb54c21a33b82f399cc6d', 
   'bulletinFamily': '601892ece72be3be2f57266ca2354792', 
   'cpe': 'a173072793578541ea04b7baa0323592', 
   'cvelist': 'ab861885dbe02d09a3a2208dd9731d62', 
   'cvss': '3c236091754d2db00c1c42f811b3ada4', 
   ...
}

Comments

[User .]

я новичок в python, есть большая строка таких данных из нее требуется получить нужные мне данные по ключу, и меня сильно смущает что везде перед ключами стоит 'u' и что используются одиночные ковычки.

[JRazor]

JavaUser Spring, Нужные данные - это получить hash по ключу?

[User .]

JRazor, да, главная моя задача это получить ряд значений по их ключу.
вот к примеру часть того я получаю, также я не нашел с помощью чего я могу данный json привести в читабельный вид, мешает этот символ 'u' подозреваю что это кодировка Unicode

{u'hashmap': [{u'hash': u'6d3f4796275bb54c21a33b82f399cc6d', u'key': u'assessment'}, {u'hash': u'601892ece72be3be2f57266ca2354792', u'key': u'bulletinFamily'}, {u'hash': u'a173072793578541ea04b7baa0323592', u'key': u'cpe'}, {u'hash': u'ab861885dbe02d09a3a2208dd9731d62', u'key': u'cvelist'}, {u'hash': u'3c236091754d2db00c1c42f811b3ada4', u'key': u'cvss'}, {u'hash': u'304c200bf4a637f269c9acaf5f79c209', u'key': u'description'}, {u'hash': u'0e53d0deb991b66bb6a7a414e375241c', u'key': u'href'}, {u'hash': u'94ef3fc1d42d02bbb210dabce65fc771', u'key': u'modified'}, {u'hash': u'104e09b5ff5b1ce3bc17f5fe64295116', u'key': u'published'}, {u'hash': u'47d626b13a91936a1833b5a13e20740e', u'key': u'references'}, {u'hash': u'601892ece72be3be2f57266ca2354792', u'key': u'reporter'}, {u'hash': u'd41d8cd98f00b204e9800998ecf8427e', u'key': u'scanner'}, {u'hash': u'86a69a73afce6263b58d42af8e129794', u'key': u'title'}, {u'hash': u'1716b5fcbb7121af74efdc153d0166c5', u'key': u'type'}], u'cpe': [u'cpe:/a:microsoft:server_message_block:1.0'], u'edition': 10, u'href': u'https://web.nvd.nist.gov/view/vuln/detail?vulnId=C...', u'references': [u'https://portal.msrc.microsoft.com/en-US/security-g...', u'www.securitytracker.com/id/1037991', u'https://www.exploit-db.com/exploits/41891/', u'https://cert-portal.siemens.com/productcert/pdf/ss...', u'www.securityfocus.com/bid/96709', u'https://www.exploit-db.com/exploits/43970/', u'https://www.exploit-db.com/exploits/41987/', u'https://ics-cert.us-cert.gov/advisories/ICSMA-18-058-02', u'https://cert-portal.siemens.com/productcert/pdf/ss...'], u'id': u'CVE-2017-0147', u'scanner': [], u'title': u'CVE-2017-0147', u'assessment': {u'href': u'', u'name': u'', u'system': u''}, u'cvss': {u'vector': u'AV:NETWORK/AC:MEDIUM/Au:NONE/C:PARTIAL/I:NONE/A:NONE/', u'score': 4.3}, u'hash': u'a37c5634dde4af65ae40b5783d9dc874238b1e86f921277b40dca0dff9cbb14a', u'description': u'The SMBv1 server in Microsoft Windows Vista SP2; Windows Server 2008 SP2 and R2 SP1; Windows 7 SP1; Windows 8.1; Windows Server 2012 Gold and R2; Windows RT 8.1; and Windows 10 Gold, 1511, and 1607; and Windows Server 2016 allows remote attackers to obtain sensitive information from process memory via a crafted packets, aka "Windows SMB Information Disclosure Vulnerability."', u'reporter': u'NVD', u'objectVersion': u'1.3', u'viewCount': 121, u'bulletinFamily': u'NVD', u'type': u'cve', u'cvelist': [u'CVE-2017-0147'], u'modified': u'2018-06-20T21:29:00', u'lastseen': u'2018-06-21T10:59:39', u'enchantments': {u'vulnersScore': 5.0, u'score': {u'vector': u'NONE', u'value': 5.0}}, u'published': u'2017-03-16T20:59:04', u'history': [{u'differentElements': [u'references', u'modified'], u'lastseen': u'2017-07-18T10:49:35', u'bulletin': {u'scanner': [], u'modified': u'2017-07-17T09:18:11', u'edition': 4, u'href': u'https://web.nvd.nist.gov/view/vuln/detail?vulnId=C...', u'references': [u'https://portal.msrc.microsoft.com/en-US/security-g...', u'www.securitytracker.com/id/1037991', u'www.securityfocus.com/bid/96709'],

[JRazor]

JavaUser Spring, забудь про u, просто выбери данные, которые нужны и работай с данными как со словарем (dict). Когда ты используешь json.loads, данные превращаются в обычные python данные. Почитай про списки и словари и вернись к данным после прочтения. Тут кроме них ничего не нужно.

[User .]

Так или иначе мне придется использовать метод loads.... проблема в том что я не могу загрузить даже данную строку
я вижу ошибки:

Traceback (most recent call last):
File "./t.py", line 4, in
j = json.loads("{u'hashmap': [{u'hash': u'6d3f4796275bb54c21a33b82f399cc6d', u'key': u'assessment'}]}")
File "/usr/lib/python2.7/json/__init__.py", line 339, in loads
return _default_decoder.decode(s)
File "/usr/lib/python2.7/json/decoder.py", line 364, in decode
obj, end = self.raw_decode(s, idx=_w(s, 0).end())
File "/usr/lib/python2.7/json/decoder.py", line 380, in raw_decode
obj, end = self.scan_once(s, idx)
ValueError: Expecting property name: line 1 column 2 (char 1)

метод loads принимает только такую строку:
#!/usr/bin/env python
import json

""" получаю вот такую строку"""
"""j = json.loads("{u'hashmap': [{u'hash': u'6d3f4796275bb54c21a33b82f399cc6d', u'key': u'assessment'}]}")"""

""" а загрузить получается только вот такую"""
j = json.loads('{"hashmap": [{"hash": "6d3f4796275bb54c21a33b82f399cc6d", "key": "assessment"}]}')

print(j['hashmap'][0]['hash'])

[Олег Котов]

JavaUser Spring, проверять лень, но попробуй сначала проверить тип данных при помощи метода type(j).
Есть вероятность, что это вовсе не строка.

Answer 2

[Павел Аксенов]

Невалидный json. Должен быть с двойными кавычками.
https://stackoverflow.com/questions/4162642/single...

>>> import ast
>>> s = "{'username':'dfdsfdsf'}"
>>> ast.literal_eval(s)
{'username': 'dfdsfdsf'}