Видимо, к стене. В доме у женщины или в их совместном с нею доме. Потому что, как считается, обещал.
Откуда этот концепт? Почему полку? Почему прибить? Кто-нибудь когда-нибудь на самом деле прибивал полку? А обещал прибить?
Это из времени деревянных изб ещё идёт, что ли?
И что это может быть за полка? Для чего? Как она выглядит?
Понятно, что этот концепт возникает в разговорах просто как символ некоторой мужской работы по дому (или избегания оной), но вот те, кто эту полку упоминает, что-то представляет себе в это время? Или нет?
Мне кроме полочки для иконки в красном углу избы как-то ничего не представляется: всё остальное не сочетается со словом "прибить". Если только не использовать его в значении "пристрелить строительно-монтажным пистолетом".