曾祖父:李懽,北魏河秦二州刺史、杜縣開國公
祖父:李崇義在北魏時期擔任過殷州(治所位於今河北省隆堯縣)刺史,北周時封永康縣公。
父:李詮,隋趙郡太守、臨汾襄公
母:韓氏
兄:李正明,唐左驍衞、右屯衞、左衞將軍、蘭夔原靈四州都督、金紫光祿大夫、上柱國,襲永康公,贈秦渭等四州諸軍事、秦州都督
兄:李端,字藥王,隋將
弟:李客師,唐左領軍大將軍、幽州都督、丹陽郡公
弟:李偉節,隋司隸州刺史
子:李德謇、李德獎。