react-yandex-maps отличная бибилиотека, использовал на 2-х проектах, проблем вообще никаких нет, в том числе и с яндекс картами самими.
Сам же ключ при использовании react-yandex-maps нужно вписывать в query у YMaps Provider:
<YMaps
query={{
ns: "use-load-option",
apikey: "ваш ключ api",
load: "загружаемые модули"
}}
>