桃花源村原名冷家坝村，因村设冷家坝而得名。解放前，此地为农村集市，由于人烟稀少，赶集的人渺无几人，显得很冷清，只有一个卖小吃的，于是人们称为冷家坝。2008年11月经县人民政府批准更名为桃花源村。
村驻地寨安坝，此处地势低洼，地处小溪旁，但从未被水淹，甚为安全，故名寨安坝。民国1年称乌罗乡第二保，1952年为寨安乡，1958年为寨安大队，1985年改为村，以所在居民点名称（寨安坝）得名的群众自治组织。
