2 варианта.
1. В Excel в поиск надо вставить символ перевода строки (который alt+enter внутри ячейки). Просто так его в поиск не вставить, надо нажимать CTRL+J. Но при этом поле ввода текста не увеличивается, поэтому очень неудобно точно искать место для ввода невидимого символа, особенно с учётом того, что у вас там полно пустых пробелов.
.
2. Вставить в word (там нагляднее), заменить, вставить обратно в Excel.
В Word символ-разделитель строк — "разрыв строки", ставится через "специальный формат"
<tr class="sp">^l <td colspan="2"> </td>^l </tr>