灵璧县历史悠久,人文景观荟萃。《通鉴纪事本未·高帝灭楚》:汉高祖三年(前204),刘邦占领彭城,项羽率精兵三万来战,“大破汉军”,汉卒淹死于谷水、泗水者“十万余人”。楚军“又迫击至灵壁东睢水上”,汉兵“十余万人皆入睢水,水为之不流”。刘邦陷入重围,幸而大风骤起,飞沙走石,才“与数十骑遁去”。县志记载传说:刘邦见楚军追来,藏匿于枯井,坐骑隐入于山洞。追兵过后,坐骑将缰绳垂入枯井,救出刘邦。后人称此井为“垂缰井”,在灵壁城北七十里。五河县也有类似传说。楚汉战场“灵壁”,不是今灵璧县城,而是另一地名。《元和郡县志》在宿州苻离县下注:“灵壁故城,在(苻离)县东北九十里。”苻离县故城在今宿城北苻离集。今灵璧县城在苻离集东偏南,而不在东北。光绪《宿州志》:“宋元右时复置于宿州之东者,乃今之灵壁县,非古地灵壁也”。灵璧县城近汴水,古灵壁则近睢水。