安期生，原是一位药农。因他生长海边，终年跋山涉水采集草药，身体练得十分硬朗，到了老年，仍很健壮，时人皆称“千岁翁”。
相传，秦始皇巡游全国，来到山东地界，听说世上竟有“千岁翁”，又听说海上多仙山，产长生不死之药，便派人把安期生请去，“赐以金玺”，命安期生下海采药供他服用。深知世上并无长生药的安期生“坚不肯受”，并对秦始皇说：“你过一千年之后再到海上来找我吧！”安期生辞别秦始皇后，怕拿他问罪，便下海隐居了。
安期生下海隐居的地方，就是舟山群岛中的马秦、桃花、普陀山等处。他在此间采药济民，安度晚年，有时也饮饮酒，作作诗画。有一次，他在桃花岛上饮酒作画，把用酒作水磨成的墨水洒于山石上（一说他酒醉后把墨水泼于石上），顿时，石上显现出桃花状的艳丽花纹。从此，人们就把这个岛屿叫作桃花岛。
这个传说有些近于神话，泼墨使石上显现“桃花”也不符合科学，然史籍对安期生来桃花一带隐居的记载确凿，唐宋建县以来，还把六横、桃花附近诸岛划为一个乡，取名为安期乡来纪念这位不畏强暴的药农。
