明嘉靖时属集善乡二十四、二十五两都；1931年置潘岱乡；1935年分属北首、北善乡；1946年属陶山区首善乡；1949年分置北首、桐善2乡；1950年8月置潘岱乡；1958年10月改称潘岱生产大队，1959年3月改称潘岱管理区，属陶山公社；1961年改建潘岱人民公社，属陶山区；1984年复置潘岱乡；2000年8月与城关镇、上望镇合置安阳镇；2003年12月撤安阳镇，分置安阳街道、锦湖街道、玉海街道、潘岱街道、东山街道、上望街道；2011年4月并入锦湖街道；2015年12月从锦湖街道析置，复置潘岱街道。