Kaple - kdy byla postavena a komu je zasvěcena, se dosud nepodařilo vypátrat. Hřbitov – podle nápisu na centrálním kříži byl zřízen v roce 1833, roku 1886 rozšířen. Centrální kříž – podle nápisu na něm byl vztyčen roku 1865. Hroby – na hřbitově je pohřben i kontraadmirál otto herrmann. Rodině herrmannů patřila v kolešovicích vila při silnici (vpravo) na hořesedly, v níž je dnes mateřská škola. Otto herrmann byl v 1. Světové válce velitelem s. M. S. Kaiser karl vi., narodil se roku 1870, zemřel 1923.
Do roku 1832 stála na tomto místě jen socha. Ve svátek sv. Jana Nepomuckého (16. května) umístil zámecký zahradník na sochu kytici pelargonií, která vydržela kvést šest týdnů. To považováno za zázrak, lidé k soše proudili v celých procesích (nejvíce v roce 1833). Nato byla z výnosu sbírek (blíže nespecifikovaných) postavena nad sochou kaple. Od roku 1835 už se poutě nekonaly.
Věnována roku 1924 rodinou Ullmanových.
Zmíněn jako farní v 1. polovině 14. století. V roce 1610 měl být kostel vypálen, za Münicha z Arzbergu a za Nosticů kostel opravován. V letech 1706-1708 za hraběte Ferdinanda Johana z Nostic kostel znovu vystavěn. Další úpravy kostela za Georga Olivera Wallise v roce 1730 a následujících letech – v této době vznikly obě oratoře a levá věž, která však kvůli několika požárům zůstala nedokončená. V letech 1733-34 dokončena věž na pravé straně. V roce 1739 věnoval hrabě Georg Oliver Wallis na hlavní oltář kostela kopii obrazu (Bild) Madonna della lettera zhotovenou podle originálu ve městě Messina na Sicílii. Kopii obrazu požehnal papež Benedikt XIII. V roce 1739 se v Kolešovicích poprvé slavila slavnost „Maria-Brief Fest“, každoročně 3. června proudily do Kolešovic davy poutníků a Georg Wallis „měl úmysl postavit kolešovický kostel tak velký, aby pojal všechny poutníky“. Své plány však nerealizoval, zemřel 1745.
Kdy byl kříž postaven, není známo. Tabulka s původním nápisem se nedochovala. Podle vyprávění obyvatelky z nedalekého domu měl být postaven na místě, kde zabil blesk česáče, který se vracel z chmelnice. Proto byl kříž při obnově v roce 2008 věnován všem česáčům na Rakovnicku. Kříž byl před zahájením restaurátorských prací až na samotný litinový kříž kompletní, všechny díly podstavce byly pohromadě. Podstavec byl natřený šedo-modrým nátěrem, pod nímž prosvítal bílý nátěr.