Существует ли какой скрипт или библиотека для поиска «Странных символов» и их утилизации?

Question

[Степан]

Работаю с GraphQl к сожалению он не хочет жрать ►► ✔ ◄◄ и одинарные кавычки.

Может быть есть какой нибудь нормализатор строк, что бы свой не городить, мало ли какие мне символы попадутся там

Answer 1

[Александр Булгаков]

может просто исходить из того какие символы тебе нужны, а не какие попадутся? попасться может всякое.

Comments

[Степан]

Да ты прав, тогда можно сделать replace и все. Но есть одно но. У нас мультиязычное приложение =(

[Александр Булгаков]

Степан: ну и что главное в ваших мультиязыках? текст? ну и фильтруйте только буквенные символы, плюс самый минимум знаков для них - точки, запятые и тп.

Answer 2

[M K]

В кодировках есть промежутки, отведённые на буквы, а есть промежутки для спецсимволов - исходя из этого, можно сделать фильтр и просто вырезать спецсимволы
Вот таблица юникода: тыц