Согласно древнему преданию, в далекие Средние века, когда князь великий литовский Ольгерд – сын Гедимина, отправился на войну, язычники напали на монахов ордена Святого Франциска. Семерых из них безжалостно казнили прямо на Рыночной площади, а семерым удалось сбежать. Однако не прошло и нескольких часов с момента побега, как были они застигнуты на вершине Лысой горы. Четверых монахов бросили в реку, а троих распяли на крестах, оставив умирать на солнце.

В память о трех монахах, о мученической смерти францисканцев в начале XVII века братьями ордена были воздвигнуты три деревянных креста на том самом месте казни, на вершине Лысой горы. Те кресты простояли ни много ни мало, а более сотни лет, пока в 1740 году их не разобрали, заменив более высокими, более крепкими крестами, что стояли на горе вплоть до 1869 года. В это время литовские земли находились под властью Российской империи, что запретила устанавливать какие бы то ни было памятники христианской сакральной скульптуры.

Возможно, легенда о монахах и Три креста на горе бесследно канули в бы Лету и мир бы о них не вспомнил, если бы не католический священник Казимир Михалькевич, который собрал средства на новый монумент из прочного железобетона. Проект доверили местному талантливому скульптору Антонию Вивульскому, а окрестил кресты все тот же священник Казимир. И вновь кресты были взорваны по приказу советской власти. Уцелевшие фрагменты были спрятаны, а позднее замурованы в кресты, которые возвышаются на Лысой горе сегодня.

Многострадальная история Трех крестов на Лысой горе разлетелась по всей Литве, а затем и за ее пределами. Сегодня Три креста являются одной из главных достопримечательностей, туристы поднимаются на гору не столько для того, чтобы почтить память францисканцев, сколь увидеть то, за что веками боролись горожане.