唐朝人説：“城南韋杜，去天尺五。”在今西安東南（故少陵原）有唐代長安杜氏家族墓葬，著名宰相杜如晦、杜佑、晚唐詩人杜牧均埋葬於此。
京兆杜氏的世系可以追溯到西漢御史大夫杜周。杜周本居南陽（今河南南陽），漢武帝時期以豪族遷於茂陵（今陝西省興平）。子杜延年又遷於杜陵（今陝西西安東南）。
京兆杜氏歷朝多為官，名人輩出，魏晉到隋唐皆與各大門閥皇族宗室聯姻。東漢時有杜篤曹魏時期有杜畿，杜恕。杜恕之子，鎮南大將軍杜預為西晉著名的政治家，軍事家和學者唐朝時代為官者為最，如凌煙閣二十四功臣之一杜如晦，歷史典藏《通典》之作者杜佑，其孫則乃晚唐詩人杜牧。唐朝京兆杜氏為宰相者有多人，為刺史郡守者數量更甚。
京兆、襄陽、河南杜氏本一家。東晉時期，杜耽(杜預次子)後裔一支遷居襄陽，該支後裔有名人杜懷寶、杜龕、杜申言、杜甫等。東晉末年還有隨劉裕南下定居壽陽的杜坦(杜驥)一支
