臥佛臺遺址位于濱北西街，1954年在該地附近發現了黑陶、石、蚌、骨等器物和殘片。經過省有關單位鑒定，確認為龍山文化遺址，并被列為省級重點文物保護單位。1983年8月，被定為縣級重點文物保護單位，并成立保護小組。1987年10月，市政府豎立了“臥佛臺遺址”的標志。此遺址曾出土過從新石器時代到東周時期的各種器物，如石斧、石鑿、骨錐、骨簪、鹿角化石和豆、鬲、壺、罐、缽等陶片，顏色有灰、黑、白、砂等。