Samhället Latorp ligger mellan Vintrosa och sjön Tysslingen, vid foten av Kilsbergen. Samhället har växt upp kring Latorps herrgård, som uppfördes 1845. Mellan 1879 och 1921 bröts kalksten på platsen.