Давайте не будем армировать неармируемое и добротно армировать армируемое :!: (шутка)
В основном небольшие арки, которые венчают ваше окошко (зачастую не очешь широкое) не армируются, но иногда на большом изделии ставят усилитель. Особенно, если это круглое окно с открывающейся частью - да, и такое встречается. При этом после того, что обычно делается с армирующим профилем (подрезка через каждые несколько см. для гиба) он в значительной степени теряет свойства усилителя.