Ponad 600 lat temu książę Witold sprowadził z Krymu do Trok 380 rodzin karaimskich. Każda liczyła po kilkoro dzieci, co łącznie dawało około półtora tysiąca osób. Dziś mieszka ich tu 70. Według spisu ludności na terenie całej Litwy w 1997 roku znajdowało się ich 260, a według tegorocznego już tylko 196. W 1989 roku na Światowy Zjazd Karaimów do Trok zawitało 500 osób przyznających się do tej nacji.