У Вас файл скачался в nginx_signing.key.2, а Вы добавляете nginx_signing.key, и не понятно что там в нем. Сделайте cat nginx_signing.key и результат приложите.
Можно попробовать через модуль hashlimit с hashlimit-mode=srcip,srcport. Этот параметр поможет выполнить условие лимит на коннект.
Но, мне кажется, что правильней держать черные и белые списки на ipset.