Na południowy wschód, kilkaset metrów od centrum Ryczowa, znajduje się niezbyt wysoka, lecz trudno dostępna skała. Na jej szczycie widać ślady murów. Kilkadziesiąt lat temu nad skałą wznosiły się jeszcze resztki wysokiej baszty. Znajdowała się tu strażnica obronna. Pełniła ona rolę wartowniczą w stosunku do niedalekich zamków. Nie istnieją jednak żadne historyczne przekazy o tym kto i kiedy ją wybudował.
Na podstawie analizy historycznej, rodzaju użytych materiałów i charakteru budowli przypuszcza się, że sięga ona XIV lub początku XV w. Pierwsza historyczna wzmianka o Ryczówku Leśnym pochodzi z XV w. Był on wówczas wsią królewską, natomiast pod koniec XV w. stał się własnością Stanisława Chełmskiego.
