桑姓人这么少是因为这个姓氏是稀有姓氏，桑姓是一个历史悠久，姓源复杂的姓氏，历史可以上溯至远古少昊时代，桑姓人口列全国第二百五十三位，源于神农氏，出自炎帝之妻桑氏，属于以先祖名字为氏。

宋朝时，桑姓大约有4万5千人，在全国的分布主要集中于陕西、山东、河北、河南、湖北、江苏等地。陕西为桑姓第一大省，约占全国桑姓总人口的43%。明朝时，桑姓人口急剧减少，大约有1万4千人，在全国的分布主要集中于江苏、河南、浙江、河北、安徽、山西，这六省大约占桑姓总人口的93%。江苏为桑姓第一大省，约占全国桑姓总人口的43%。