Zazwyczaj zmienia się to w edycji strony w panelu w bocznym pasku, ale OIW nie każdy motyw ma tę funkcję. Jaki motyw masz Ty?
Istnieją do tego wtyczki, na przykład ta: https://pl.wordpress.org/plugins/fullwidth-templates/