เป็นป่า และภูเขาทางทิศตะวันตกและทิศใต้ ค่อยๆ ลาดเอียงไปทางทิศตะวันออก พื้นที่ส่วนใหญ่เป็นที่ราบลุ่ม

           พื้นที่ อำเภอพุนพิน เป็นชุมทางการค้าของชาวอาหรับ-พ่อค้าจีน มาแต่โบราณ มีการพบศิลปวัตถุมากมายที่บ่งบอกถึงอารยธรรมด้านพุทธศาสนาลัทธิลังกาวงศ์ ที่เข้ามาแพร่หลาย

           นักโบราณคดีสันนิษฐานว่า จากจดหมายเหตุจีนที่กล่าวว่า อาณาจักรผั่น-ผั่น ก็คือ พุนพิน นี่เอง

           ชื่อของพุนพิน ปรากฏในพงศาวดารและจดหมายเหตุ อยุธยา ในชื่อของ “ท่าข้าม” เป็นแขวงขึ้นกับเมืองไชยาตลอดมา

           สมัยรัชกาลที่ ๕ ระหว่างปี ๒๔๓๙-๒๔๔๑ ได้มีการจัดตั้งอำเภอพุนพิน ตั้งที่ว่าการที่ บ้านพุนพิน ตำบลท่าข้าม

           ๑ มกราคม ๒๔๕๘ ย้ายศาลารัฐบาลและศาลากลางเมืองสุราษฎร์ มาตั้งทำการที่ท่าข้าม บนสวนสราญรมย์ เนื่องจากเป็นชุมทางทางการค้าและคมนาคม แต่เมื่อย้ายมาทำการได้ ๖ ปี จึงย้ายกลับมาที่บ้านดอน เมื่อปี พ.ศ. ๔๖๔ กองบัญชาการที่ท่าข้าม มอบให้อำเภอพุนพินดูแลต่อไป

           พ.ศ. ๒๔๖๓ แยกบ้านท่าข้าม ตำบลวัดประดู่ และตำบลท่าสะท้อนจากอำเภอบ้านดอน รวมกันเรียกตำบลท่าข้ามย้ายที่ว่าการอำเภอพุนพิน จากหมู่ที่ ๑ มาตั้งที่ตำบลท่าข้ามเรียกว่า “อำเภอท่าข้าม”

           พ.ศ. ๒๔๘๒ เปลี่ยนชื่อ อำเภอท่าข้าม เป็น อำเภอพุนพิน จนกระทั่งปัจจุบัน