Czy tego przypadkiem nie ustawia się poprzez wybór odpowiedniego szablonu w szybkiej edycji wybranej podstrony?
Nie. Wszystkie szablony mają domyślnie te same sidebary. Nie spotkałem się z szablonem który by miał inne na każdej podstronie. Jeśli takowy widziałeś to chętnie zobaczę..
Możesz to zrobić na 2 sposoby:
1. przy tej opcji musisz w functions.php utowrzyć sidebary
<?php if( is_page(ID_STRONY)) { ?>
wczytaj kod do sidebar 1
<?php } else if( is_page(ID_STRONY)) { ?>
wczytaj kod do sidebar 2
etc.
<?php } ?>
2. https://wordpress.org/plugins/display-widgets/ pozwala wyświetlić dany widget (menu/text html/content block/etc.) na danej podstronie/grupie stron/kategorii/etc.