Kaprivi dzimta bija cēlusies no Krainas, kas veido mūsdienu Slovēnijas lielāko daļu. Dzimtai bija daļēja slovēņu izcelsme. Uzvārda sākotnējā forma bijusi “Kopriva”, kas nozīmē “nātre” slovēņu valodā. 17. gs. Kaprivi dzimta pārcēlās uz dzīvi Silēzijā, kur 1653. gadā par nopelniem karos pret turkiem dzimta tika iecelta bruņinieku kārtā.
L. fon Kaprivi bija vecākais dēls Prūsijas augstākās tiesas priekšnieka Leopolda fon Kaprivi (Leopold von Caprivi) un Emīlijas, dzimušas Kepkes (Emilie Köpke) ģimenē. Abi vecāki atšķīrās no citiem Prūsijas sabiedrības virsslāņa pārstāvjiem (junkuriem) ar to, ka tiem nepiederēja zemes īpašumi. Bērnībā L. fon Kaprivi apmeklēja Berlīnes Frīdrihsverdes ģimnāziju (Friedrichwerdersches Gymnasium). Pēc tās beigšanas 1849. gadā iestājās Prūsijas armijas grenadieros un Berlīnē apmeklēja Prūsijas Kara akadēmiju (Preußische Kriegsakademie), kur ieguva virsnieka pakāpi. Attiecībās ar līdzcilvēkiem L. fon Kaprivi bija labsirdīgs, tomēr viņam piemita stūrgalvība un dažas dīvainības, kā, piemēram, nepieklājīga izturēšanās attiecībās ar sievietēm. Iespējams, ka tādēļ viņš arī nekad neapprecējās.