robotmode

Конечно можно, в целом достаточно часто так и делают, разве что сразу создают верстку как часть cms (для wp - это темы, например).

Однако, чтобы сделать хотя бы минимальную интеграцию html в тот же самый Wordpress, то необходимо знать по крайней мере:

• хотя бы минимально php (иначе будет просто тяжело)
  
• специфику самой системы: архитектура, используемые подходы, стандартные функции и многое прочее
  

Вижу тег wp, а значит:
https://developer.wordpress.org/rest-api/
https://github.com/wp-graphql/wp-graphql
WP как админка, а front как сайт. Дешево, с душком, но простые задачи решает.

Здравствуйте, изучаю веб-разработку не так давно, но уже слышал про CMS

Предположу, что с такими знаниями будет тяжело тянуть отдельно wp и отдельно front.

И насколько вообще важная штука CMS, и как частно нужно будет с ней работать?

Зависит от требований заказчика, от 0 до 146%.