Pilskalnam neliels iegarens plakums, kas pret vidu nedaudz uzkumpis. Uzbedumu nav nekādu, jo malas ir visai stāvas. Tomēr austrumos un dienvidos kalnmalās redzamas terases. Pirmā terase ierīkota 4 m. zemāk plakumam, bet otrā 9 m. zemāk. Ziemeļos un austrumos terašu nav.
Vienu kilometru rietumos Vec-Sēlpils muižai Daugavas kreisā krastā pie Zvejnieku mājam rēgojas mūra pils počas. Tās ordeņa laikos celtās pils atliekas. Vēsturnieki domā, ka Sēlpils pilsdrupas stāvot tai paša vietā, kur atradusies senā „castrum Selonum” pieminēta Indriķa kronikā (XI. 6.) Kronists šo pili min kā drošu patvērumu, tomēr sabiedrotais vācu-lībju un latvju karaspēks šo cietoksni ieņem 1208. g.
