Erling bodde på gården Kvie i Vang, Oppland fylke. Barnbarnen Skule och Guttorm växte upp på gården, men flyttade omkring 1204 till sin halvbror och nyvalde kung Inge Bårdsson i Nidaros (Trondheim).