大体は台座からカバーは外れるはずですが、ひねって外すか、下へ引っ張るとか適度な力加減で試してみてください。
軒先なのでゴムが劣化して接着状態になっているのかもしれませんが、メーカーラベルが貼ってあれば確認したほうが確実です。