Pierwsi to potomkowie tych, których przed wiekami sprowadził z Krymu wielki książę litewski Witold i osadził w swoim księstwie – m.in. w stolicy, Trokach, Wilnie, Łucku i Haliczu. Przez kolejne 630 lat społeczność karaimska dzieliła dolę i niedolę z Polakami i Litwinami, zachowując jednak swoją odrębność. Po II wojnie światowej przybywali z transportami tzw. repatriantów m.in. na Dolny Śląsk i Opolszczyznę.