據史料記載，春秋戰國時期，新興縣境為百越地。
秦始皇三十三年（公元前214年）設南海郡，新興縣屬南海郡領地。漢初為南越國屬地，相傳南越王趙佗曾在今六祖鎮狩獵獲白鹿一雙，在當地建白鹿台以誌喜。
漢武帝元鼎六年（公元前114年），平南越，設南海、蒼梧、合浦等郡，在新興縣境內設臨允縣，歸合浦郡管轄。臨允本意為臨允水而建，允水就新興江的古稱。臨允縣在今天的新興縣南部，是雲浮市境內最早建立的縣級政權。東晉永和七年，設新興縣，治所在今新城鎮；晉末，從臨允縣分設單牒縣，治所就在今天東城鎮丹堞村一帶。南朝時期虎曼山一帶為單牒縣管轄。此後新興縣境內還出現過索盧、新昌等縣名，杜位在貶為新州參軍時，新興縣當時叫新昌縣，因此他將八景命名為新昌八景。到元朝以後，這裏基本上都以新興縣的名稱沿用至今。
唐宋時期，嶺南新州為官員及其家屬、族人貶謫流放之地，新興縣最為著名的人物禪宗六祖惠能的父親盧行瑫就在唐初武德年間被貶至此地，後入籍當地在夏盧村落户，與李姓女子成婚生下了惠能。
杜位被貶時，六祖惠能的名聲已經響徹神州大地，因此杜位當然少不了要去六祖的家鄉拜謁一番。
他在《龍山勝概》中寫道：
甘培旭
“《龍山勝概》這首詩它描繪了龍山國恩寺所處的位置和地形地貌以及它的特徵，比如‘四面好山多兀突'，白雲繚繞猶如仙境；又從細節方面反映出這個寺廟好莊嚴，香客絡繹不絕這樣的盛況，它指出了這裏龍山勝概是一個風景美如畫，還可參佛悟道，實在是登臨快意之所。龍山勝概是我們的驕傲來的，也是八景中唯一沒有太大變化的一個地方。”