Wspólnota zasiedlająca tereny Aleksandrowa Wielkiego w latach 30. ubiegłego wieku wyczekiwała kościoła od dawna. Początkowo w Osówce funkcjonowała Parafia Kościoła Starokatolickiego Mariawitów. W 1929 r. założono Parafię Polskiego Narodowego Kościoła Katolickiego pw. Matki Bożej Różańcowej (obecnie Kościół Polskokatolicki). Po zawiązaniu parafii, pierwsze nabożeństwo odbyło się przed domem jednego z mieszkańców, Jana Tomali. Do czasu zbudowania drewnianego kościoła, przez pełny rok nabożeństwa odbywały się w domu Antoniego Poprzeczki, który odstąpił jeden swój pokój na urządzenie kaplicy.

Budowla została złożona z przygotowanych wcześniej elementów drewnianych. Budynek przetrwał do dziś bez większych zmian w formie zewnętrznej. Wpisem do rejestru zabytków została objęta również zielona przestrzeń otaczająca kościół.

Jak podaje Wojewódzki Konserwator Zabytków, to charakterystyczny element krajobrazu kulturowego gminy Sienno. Jest jedynym funkcjonującym kościołem polskokatolickim w południowej części województwa mazowieckiego i jednym z nielicznych, zachowanych zabytków drewnianych w powiecie lipskim.