Pierwotnym założeniem w Wiadrowie był zamek rycerski, spalony w 1430 r. Najpewniej na jego miejscu założono w XVI w. dwór, jednak w 1770 r. przebudowano go gruntownie na pałac. W XIX w. został odrestaurowany oraz zmodernizowany i prawdopodobnie w takiej formie pozostał do dziś.

Pałac jest murowanym założeniem zbudowanym na planie prostokąta. Posiada dwie kondygnacje i kryty jest dachem spadowym łamanym. Dookoła znajduje się fosa.