Apdzīvotā vieta izveidojusies Braslavas—Daugavpils ceļa malā un jau 19. gadsimta vidū bija nozīmīgs satiksmes centrs un ceļinieku atpūtas vieta.[3] 1925. gadā Borovkai tika piešķirts biezi apdzīvotas vietas (ciema) statuss. 1932. gadā Borovka tika pārdēvēta par Sileni.[4] 1935. gadā Silenē bija 1022 iedzīvotāji. Līdz 1949. gadam Silene bija Silenes pagasta centrs.
Silenē atrodas pagasta pārvalde, pamatskola, klubs, bibliotēka.[5]