幻方最早记载于中国前五百年的春秋时期《大戴礼》中,这说明中国人民早在二千五百年前就已经知道了幻方的排列规律。而在国外,130年,希腊人塞翁才第一次提起幻方。中国不仅拥有幻方的发明权,而且是对幻方进行深入研究的国家。13世纪的数学家杨辉已经编制出三至十阶幻方,记载在他1275年写的《续古摘厅算法》一书中。在欧洲,直到U14年,德国著名画家丢勒才绘制出了完整的四阶幻方。
在国外,十二世纪的阿拉伯文献也有六阶幻方的记载,中国的考古学家们曾经在西安发现了阿拉伯文献上的五块六阶幻方,除了这些以外,历史上最早的四阶幻方是在印度发现的,那是一个完全幻方,而且比中国的杨辉还要早了两百多年,印度人认为那是天神的手笔。