Budynek ,

w którym, w 1961, w części mieścił się gmach starostwa był w drugiej połowie XVIII i pierwszej połowie XIX stulecia własnością rodziny Stemplów, z której jeden członek Andrzej Stempel pod rokiem 1776 tytułował się "Pocztmajster Jego Królewskiej Mości Rzeczypospolitej Polskiej". Rodzina Stemplów wywodziła się z Saksonii i stanowiła rodzinę poczciarską. w tym bowiem okresie spotykamy się z pocztmajstrami wzgl. pocztmagistrami tegoż nazwiska również i w Wieruszowie oraz w Naramicach, w powiecie wieluńskim. Około roku 1840 przeniesiono lokale poczty do budynku wystawionego około roku 1814, położonego przy ulicy Pocztowej nr.1, w którym mieściła się oberża z zajazdem. Dopiero w latach 1888-1889 wystawiono obecny, okazały i odpowiednio dostosowany gmach poczty.
Gmach ten jest w stylu neorenesansowym, ceglany i nietynkowany, na planie prostokąta z prostokątną jednokondygnacyjną przybudówką os strony wschodniej. Dach czterospadowy z mansardami, górą płasko ścięty i zakończony ażurową, żelazną balustradą. Do przybudówki prowadzi portal o półkolistym wykroju, trójkątnym szczycie i datą 1889. Gmach ten stanął na miejscu rozebranego, drewnianego dworku pańskiego, zwanego zamkiem. Gmach poczty wybudował na własny rachunek z kredytów uzyskanych od rządu pruskiego, budowniczy Otto Weber z Kępna. Dopiero w 1900 roku na podstawie zastrzeżonego prawa pierwokupu przeszedł na wyłączną własność Skarbu Państwa. W roku 1952 uruchomiono na terenie miasta w gmachu głównego dworna drugi urząd pocztowy.