Anton

В Robots никак :(
Попробуй использовать тег link canonical, в котором указывай адрес основной страницы

function utf8_for_xml($string)
{
    return preg_replace ('/[^\x{0009}\x{000a}\x{000d}\x{0020}-\x{D7FF}\x{E000}-\x{FFFD}]+/u', ' ', $string);
}

simplexml_load_string(utf8_for_xml( $page ));

Можно попробовать с помощью CDATA.

<description><![CDATA[<strong>Анжамбеман</strong>, соприкоснувшись в чем-то со своим главным<br/>антагонистом в постструктурной поэтике, пространственно приводит стиль. ]]></description>

Переносить строку можно попробовать с помощью ASCI-символа "\n"

<description>Верлибр \n слабопроницаем.</description>

Смотри в консоли ошибки. Возможно периодически не срабатывает js-скрипт.