一说是祖籍原为湖北襄樊麻城，在明末清初的时候通过“湖广填四川”入川，在今富顺县赵化镇一带定居。祖上原本姓翁，道光二十七年进士。咸丰八年擢补为礼部主事。1861年8月咸丰帝驾崩，素顺等八人为辅政大臣，慈禧发动“辛酉政变”。八大臣被处死。因受门生关系牵连，被定死罪。后因有人报信，遂连夜出逃。官府派兵设卡追赶。祖上经直隶、山西、陕西入四川。在山西时，路遇关卡，官兵盘问，恐漏身份，遂以五十两白银相与。故官兵不再追问，并大声道：“我已知尔等姓银不姓翁！”过关。回川后改名换姓“银”。

二说是本祖籍乃福建闽侯。其他过程与前所述基本一致。