相传宋朝后期，当时阳江城附近农村有一个老太婆。有一天，讨到了很多人家弃之不要的锅巴，她拿回来泡上残汤，当饭吃了两天，后将这些锅巴放到屋顶上晒干，以备日后讨不到饭时当干粮。她把那日前储备的锅巴拿出来充饥，又把讨来的糖和着锅巴吃，吃剩的，老太婆就捏做成一团，烤干，留作下顿作“饭”吃。吴老太的“粉酥”从那以后就在社会上流传开了，这就成了现在炒米饼的雏形。
       阳江炒米饼俗称粉酥，与佛山盲公饼、中山杏仁饼、西樵大饼合称广东“四大名饼”。传统阳江炒米饼的制作方法为炭烘法。用上好的米粉配以花生、芝麻、绿豆、椰容等配料制成薄饼，用木炭烘焙而成。阳江炒米饼酥脆甘香，堪称“阳江一绝”，被誉为阳江新三宝之一。
       以前春节，几乎家家户户都能做炒米饼，但做工其实想当复杂，大体上分为炒米——打粉——做饼——烤饼几个步骤。
       阳江炒米饼，与广东其它地方炒米饼不同的地方，就是不用黄糖加水煮成糖胶来和粉，而是直接用白糖来和粉，然后用饼模来做。饼模是木制的，上面刻有祥禽瑞兽，花草树木，还有福禄平安之类的文字，现在应该有人作为一种传统的民间木刻艺术品来收藏了。做饼是全家都能参与的工作，大人小孩围在一起，把和好的饼粉放到饼模中，一般用白糖和花生，加上一片切得很薄的肥猪肉作馅。把粉按到饼模中，还要用汤匙来回压紧。用小木锤在饼模背后把饼从饼模里捶出来，装在筛子里。 　　烤饼要使用木炭来烘焙。那时候烘焙炒米饼的木炭也有讲究，火候控制也是炒米饼好坏的关键，中医认为，这样做出来的炒米饼，对肾和胃有补虚作用，所以现在很多饼家都以古法烘焙作为卖点。