Использовать latest image - это неправильная практика.
Как сказал
akelsey, нужно обновить Task Defintion, и тогда ничего перезапускать не надо.
Я для это в Github Actions использую
aws-actions/amazon-ecs-render-task-definition
и
aws-actions/amazon-ecs-deploy-task-definition