Необязательно, но желательно. Все прихожане так делают, новопришедших или просто зашедших в храм необязательно просить одевать платок. Где как происходит. На улице и дома это ненужно, совсем необязательно.
Платок\шаль на женщине очень красиво в храме, не раз замечал. А вот никаб это слишком и не вижу никакого смысла в этом предписании.