Isaac giftet seg med Marthe Nilsdatter Willulmsen 16. januar 1781. Marthe var datter av Nils Willulmsen, kjøpmann og tobakkspinner, «en av byens 6 mænd», og eide Høgedal gård i Arendal og Grimenes gård i Lillesand. Da Nils døde overtok Isaac og Marthe Løvolds hus på Tyholmen og de andre eiendommene som faren eide.
Leth hadde offentlig kaperlisens, og eide sluppen og kaperfartøyet Admiral Tordenskiold, bygget i Lillesand av Anders Schrøder. Sluppen hadde en besetning på 22 mann, og en bestykning med to haubitsere og to vanlige kanoner. Leth eide også en kort periode fullriggerenKongen af Assianthe, et tidligere slaveskip, som ble ført av kaptein Ole Ugland.[3]