Часовня Святого Иоанна Непомуцкого была возведена в середине ХІХ века на месте деревянной. Построена она из бутового камня и представляла собой квадратный в палне объём без окон. Для строительства вместе с обычными валунами использовались надгробные камни, которые оставались от прежних заброшенных захоронений. Позже, в 1920-е годы был пристроен из кирпича и оштукатурен тамбур в стиле модерн.
Строительство часовни связывают со смертью одного из представителей шляхетского рода Володковичей — владельцев поместья Новый Двор (1863 г.). Александр Володкович, один из руководителей восстания 1830-1831 гг., умер в Париже и был похоронен на знаменитом кладбище Пер-Лашез. Но сердцем он хотел оставаться на Родине. И, согласно воле умершего, сердце его было перевезено и похоронено в специально построенной для этой цели часовне в Радошковичах.
Войны, а в последствии и советское нашествие не пощадили часовню - она осталась без крыши и дверей.
Только в 2008-2009 гг. благодаря священнику Радошковичского костёла Святой Троицы Валентину Станкевичу часовня Святого Иоанна Непомуцкого была восстановлена.