Športno društvo Partizan iz Semiča je nadaljevanje TVD (Telovadno društvo Partizan), ki je bilo ustanovljeno leta 1952. Telovadnico so imeli v prostorih Sokolskega doma, ki je obenem služil tudi kot kulturni dom – Dom ljudske prosvete. Kulturne dejavnosti so kasneje preselili v dom, ki je bil pred drugo svetovno vojno v lasti kulturno – športnega društva Orel in ga preimenovali v Kulturni dom Jožeta Mihelčiča.

Nastanek TVD Partizan sega v daljno leto 1952. To leto je prišla na OŠ Semič poučevat učiteljica telovadbe Anka Adlešič – Tomc. Prav po njeni zaslugi se je začela razvijati živahna športna dejavnost. Anka Adlešič in Anton Plut (učitelj matematike in fizike) sta bila glavna pobudnika ustanovitve TVD Partizan.