Ačkoli se seriál Bylo nás pět točil v městečku Kouřim, fanoušci Karla Poláčka dobře vědí, že skutečný děj se odehrával v jeho rodném Rychnově nad Kněžnou.
Některá místa, o nichž v knize píše, byste hledali už marně, jako chudobinec, který byl domovem Zilvara, nebo Bejvalovo povoznictví. Stále však stojí Poláčkova škola, do jejíž lavic spolu s kamarády zvěčněnými v Bylo nás pět usedal, či dům na náměstí, v němž žil a jeho otec tu provozoval koloniál. Projít se můžete Chaloupkami, kde byli doma zrzaví Ješíňáci, anebo do Habrové.

Když se pak v Rychnově před 20 lety odhalovalo sousoší Bylo nás pět, přijel sem i režisér Karel Smyczek a představitelé hlavních rolí, až na toho nejhlavnějšího - Adama Nováka alias Péťu Bajzu. V roce 2012 pak Poláčkův román Bylo nás pět a jeho seriálovou podobu připomněla výstava v místním muzeu.