Knihovna sídlí v Panském domě už od roku 1965. Od oslav 100. výročí narození spisovatele Františka Kožíka v Uherském Brodě v roce 2009 nese knihovna jeho jméno. A od jara tohoto roku prochází její oddělení pro dospělé čtenáře svou největší rekonstrukcí.