回文詩是一種很有趣的詩，關于其起源眾說紛紜，大概可以歸納為五種。

第一種說法是回文詩起源于盤中詩，雖然盤中詩的發明人很難考證了，但大體可以確定其起源于晉代，雖然盤中詩并不能像回文詩一樣順讀、逆讀皆可，但是它已經具備了回文詩形式上的雛形。

第二種說法是回文詩起源于璇璣圖，陳望道的《修辭學發凡》中曾經記載，璇璣圖共840個字，縱橫29個字的方格，回環往復讀，可以形成上千首詩。這種行文結構與回文詩形式相似，故有人認為璇璣圖為回文詩的起源。

第三種說法源于劉勰的《文心雕龍》中的一句話“回文所興，則道原為始”，后來明代的《文心雕龍音注》中指出此句所指為，回文詩是劉宋時期的賀道慶所創作的。

第四種說法是關于回文詩起源由來已久的一種說法，即傅咸、溫嶠為其創始人。因為唐代的《松陵集》中記載：“晉傅咸有回文反復詩二首，云反復其文者，以示憂心展轉也，‘悠悠遠邁獨煢煢’是也由是反復興焉。晉溫嶠有回文虛言詩云‘寧神靜泊，損有崇無’，由是回文興焉”。“悠悠遠邁獨煢煢”和“寧神靜泊，損有崇無”這兩首詩對回文詩的研究提供了重要的參考價值，而《松陵集》中又直言了傅咸、溫嶠二人是回文詩的創始人，所以對于這兩個人是回文詩的鼻祖的擁護者更多一些。

第五種說法認為銅鏡銘文為回文詩的起源，先秦兩漢以來人們經常會在常用器物上刻字，而鏡子是圓形而首尾相連，這就為回文詩形式的形成創造了條件，所以有些人認為回文詩產生的靈感來源于鏡子。