jQuery - это библиотека функций, изначально предназначенная для того, чтобы нивелировать различия между браузерами (в основном различия в DOM-API). Это отличная библиотека, которая актуальна и по сей день (несмотря на хейтеров-хипстеров, которые, как правило, просто не умеют её готовить).
React - это фреймворк для построения пользовательских интерфейсов и веб-приложений. Это ещё один способ протащить в веб философию MVC, где визуальное представление отделено от логики.
Учить нужно всё. Но начинать нужно с основ самого языка, т.е. с JavaScript.
