Как правильно заменить символы латиница на символы кириллицы в тексте?

Question

[nurzhannogerbek]

Здравствуйте! Помогите пожалуйста разобраться.

В моем джанго проекте у меня есть форма с полем, куда пользователь вводит данные и затем создает новую запись после submit. Вводить нужно на русском языке. Столкнулся со следующей проблемой.

Пользователь по ошибки в слове "Cтрана X" ввел буквы "С" и "Х" на латинице, а остальные буквы на кириллице. Далее, когда пользователь производит поиск и вводит на кириллице слово "Страна" - ничего не выводится. Результат выводится лишь, когда пользователь вводит слова "Cтрана", где С написано латиницей. В базе данных хочу записывать все сразу на кириллице. Пытаюсь использовать следующий код, но он не помог. Как правильно заменить буквы в словах?

# Без этих импортов выводится ошибка: UnicodeDecodeError: 'ascii' codec can't decode byte 0xd0 in position 0: ordinal not in range(128)
import sys
reload(sys)
sys.setdefaultencoding('utf-8')

# Латинские буквы 'ETOPAHKXCBMetopahkxcbm'
# Буквы кирилицы 'ЕТОРАНКХСВМеторанкхсвм'
WORDS = {
    "E": "Е",
    "T": "Т",
    "O": "О",
    "P": "Р",
    "A": "А",
    "H": "Н",
    "K": "К",
    "X": "Х",
    "C": "С",
    "B": "В",
    "M": "М",
    "e": "е",
    "t": "т",
    "o": "о",
    "p": "р",
    "a": "а",
    "h": "н",
    "k": "к",
    "x": "х",
    "c": "с",
    "b": "в",
    "m": "м"
}

***
def form_valid(self, form):
        title = form.cleaned_data['title'] # Поле формы
        for key in WORDS.keys():
            title = head.replace(key, str(WORDS[key])) # Замена не срабатывает
        form.save()

Answer 1

[Roman K]

Вручную маппинг одной буквы в другую писать. Надо же.

eng = 'ETOPAHKXCBMetopahkxcbm'
rus = 'ЕТОРАНКХСВМеторанкхсвм'
mapping = str.maketrans(dict(zip(eng, rus)))
'tvoya stroka'.translate(mapping)  # 'тvоyа sтrока'

Comments

[nurzhannogerbek]

Здравствуйте! Я попробовал сделать как у вас в примере, но выводит ошибку:

ERROR:

Traceback (most recent call last):
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/exception.py", line 41, in inner
    response = get_response(request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 187, in _get_response
    response = self.process_exception_by_middleware(e, request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 185, in _get_response
    response = wrapped_callback(request, *callback_args, **callback_kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 68, in view
    return self.dispatch(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 88, in dispatch
    return handler(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 217, in post
    return super(BaseCreateView, self).post(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 183, in post
    return self.form_valid(form)
  File "/home/nurzhan/dashboard.kase.kz/static_pages/views.py", line 55, in form_valid
    form.cleaned_data['head'].translate(str.maketrans(dict(zip(eng, rus))))
AttributeError: type object 'str' has no attribute 'maketrans'

Сам код выглядит следующим образом:

form.cleaned_data['title'].translate(str.maketrans(dict(zip(eng, rus))))
form.save()

Погуглив я понял, что проблема вызвана из-за того что использую Питон 2.7. Что можете посоветовать?

[Roman K]

NogerbekNurzhan, могу посоветовать использовать 3-ий питон)) На дворе конец 2017 года.
В питоне2 есть модуль string. Через него всё и делай.

[nurzhannogerbek]

Roman Kitaev, К сожалению, использовать версию 3 не могу. Проект привязан на версию 2.7. Использовал from string import maketrans, но не помогло. Та же ошибка, что описывал выше.

[Roman K]

NogerbekNurzhan, а по-моему, ты меня обманываешь.

>>> import string
>>> string.maketrans
<built-in function maketrans>

[nurzhannogerbek]

Roman Kitaev, Нет не обманываю. Только что перепроверил. Вот код:

import string

rus = 'ETOPAHKXCBMetopahkxcbm' # Буквы кирилицы
eng = 'ETOPAHKXCBMetopahkxcbm' # Латинские буквы

form.cleaned_data['title'].translate(string.maketrans(dict(zip(eng, rus))))
form.save()

Ошибка:

Traceback (most recent call last):
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/exception.py", line 41, in inner
    response = get_response(request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 187, in _get_response
    response = self.process_exception_by_middleware(e, request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 185, in _get_response
    response = wrapped_callback(request, *callback_args, **callback_kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 68, in view
    return self.dispatch(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 88, in dispatch
    return handler(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 217, in post
    return super(BaseCreateView, self).post(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 183, in post
    return self.form_valid(form)
  File "/home/nurzhan/project/static_pages/views.py", line 56, in form_valid
    form.cleaned_data['title'].translate(string.maketrans(dict(zip(eng, rus))))
TypeError: maketrans() takes exactly 2 arguments (1 given)

Что думаете по этому поводу?

[Roman K]

NogerbekNurzhan, ну так загляни в доку, нет? В python2 был другой интерфейс у maketrans

[Roman K]

NogerbekNurzhan, И да, ты меня обманываешь. Ошибка совершенно другая.

Answer 2

[Andrey Dugin]

trans_table = str.maketrans('ETOPAHKXCBMetopahkxcbm', 'ЕТОРАНКХСВМеторанкхсвм')
'Cтрана X'.translate(trans_table)

Comments

[nurzhannogerbek]

Здравствуйте! Я попробовал сделать как у вас в примере, но выводит ошибку:

ERROR:

Traceback (most recent call last):
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/exception.py", line 41, in inner
    response = get_response(request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 187, in _get_response
    response = self.process_exception_by_middleware(e, request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 185, in _get_response
    response = wrapped_callback(request, *callback_args, **callback_kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 68, in view
    return self.dispatch(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 88, in dispatch
    return handler(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 217, in post
    return super(BaseCreateView, self).post(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 183, in post
    return self.form_valid(form)
  File "/home/nurzhan/dashboard.kase.kz/static_pages/views.py", line 55, in form_valid
    form.cleaned_data['head'].translate(str.maketrans(dict(zip(eng, rus))))
AttributeError: type object 'str' has no attribute 'maketrans'

Сам код выглядит следующим образом:

form.cleaned_data['title'].translate(str.maketrans(dict(zip(eng, rus))))
form.save()

Погуглив я понял, что проблема вызвана из-за того что использую Питон 2.7. Что можете посоветовать?

[Andrey Dugin]

'Cтрана X'.translate('ETOPAHKXCBMetopahkxcbm', 'ЕТОРАНКХСВМеторанкхсвм')

[nurzhannogerbek]

Андрей Дугин, уже пробовал так. Выдает ошибку:

Traceback (most recent call last):
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/exception.py", line 41, in inner
    response = get_response(request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 187, in _get_response
    response = self.process_exception_by_middleware(e, request)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/core/handlers/base.py", line 185, in _get_response
    response = wrapped_callback(request, *callback_args, **callback_kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 68, in view
    return self.dispatch(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/base.py", line 88, in dispatch
    return handler(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 217, in post
    return super(BaseCreateView, self).post(request, *args, **kwargs)
  File "/srv/envs/py27/lib/python2.7/site-packages/django/views/generic/edit.py", line 183, in post
    return self.form_valid(form)
  File "/home/nurzhan/dashboard.kase.kz/static_pages/views.py", line 55, in form_valid
    form.cleaned_data['title'].translate('ETOPAHKXCBMetopahkxcbm', 'ЕТОРАНКХСВМеторанкхсвм')
TypeError: translate() takes exactly one argument (2 given)

Есть какие нибудь другие идеи?

[Andrey Dugin]

NogerbekNurzhan, https://www.tutorialspoint.com/python/string_trans...