桂林墓葬碑刻記載及《中國回族大辭典》登載，來桂始祖以撫宸（chen）公，字簡堂（1518－1603），祖籍陝西渭南，乃以卜拉欣後裔，明朝武官，官封“都指揮同知”，明嘉靖後期，奉命領兵南征廣西潯州（今桂平縣）、慶遠（今宜州）有功，封“都指揮義寧協戌”，令鎮守廣西，（義寧爲今臨桂縣五通鎮），遂以廣西桂林爲家，世代繁衍，迄今已歷四百八十餘年，成爲桂林回族望族。撫宸公是桂林以氏始祖。
姓以的名人是：以彤，漢時人。以壯行，清時曾任左州學正。
以姓是回族姓氏，人口約 1 千，在全國排名第 1356 位，位於晃姓 之後，曩姓 之前。以姓來自外域，祖先以卜拉欣爲阿拉伯人，唐時由西域沿絲綢之路進入中國，今山西之太原，廣西之永福、平樂等地有分佈。
