Karl Tjälvesson tillhörde Fånöätten. Fånö var ett rikt herresäte i Löts socken vid västra stranden av Ekolsundsviken i Uppland.
Karl Tjälvesson och hans hustru hade sonen Johan Karlsson samt en dotter, som gifte sig med riddaren Filip Finvidsson av Rumby. (Källa: Dick Harrison - Jarlens sekel)