ตั้งอยู่ทางทิศเหนือของอำเภอท่าใหม่ และอยู่ทางทิศตะวันตกเฉียงเหนือ  ของศาลากลางจังหวัดจันทบุรี    โดยสำนักงานเทศบาลตำบลเขาบายศรี   ตั้งอยู่ถนนรุจิรวงค์ หมู่ที่ 10  บ้านยางระหง  ตำบลเขาบายศรี อำเภอท่าใหม่  จังหวัดจันทบุรี ห่างจากถนนสุขุมวิทหรือทางหลวงแผ่นดินหมายเลข 3 ประมาณ 10 กิโลเมตร  ห่างจากอำเภอท่าใหม่ ประมาณ 15 กิโลเมตร  และห่างจากศาลากลางจังหวัดจันทบุรี  ประมาณ 20 กิโลเมตร

อาณาเขตติดต่อ

ทิศเหนือ          ติดต่อ   ตำบลสองพี่น้อง , ตำบลทุ่งเบญจา อำเภอท่าใหม่ จังหวัดจันทบุรี ,

ตำบลชากไทย  อำเภอเขาคิชฌกูฎ จังหวัดจันทบุรี

ทิศตะวันออก     ติดต่อ   ตำบลชากไทย อำเภอเขาคิชฌกูฎ  จังหวัดจันทบุรี ,

ตำบลแสลง อำเภอเมือง จังหวัดจันทบุรี

ทิศใต้              ติดต่อ  เทศบาลตำบลท่าใหม่ , เทศบาลตำบลเนินสูง , ตำบลเขาวัว ,

ตำบลสองพี่น้อง อำเภอท่าใหม่  จังหวัดจันทบุรี

ทิศตะวันตก      ติดต่อ   ตำบลสองพี่น้อง อำเภอท่าใหม่ จังหวัดจันทบุรี

การเดินทางมายังเทศบาลตำบลเขาบายศรี

เส้นทางที่ 1 จากกรุงเทพ โดยทางหลวงพิเศษ กท.-ชลบุรี หรือมอเตอร์เวย์จะประหยัดเวลาเดินทางได้มาก โดยขึ้นทางหลวงพิเศษที่ลาดกระบัง หรือ กม.8 ของ ถ. บางนา-ตราดขับยาวมุ่งไป อ.แกลง จ.ระยอง ถึงสามแยก เลี้ยวซ้ายเพื่อตรงไปเมืองจันทบุรีก่อนถึงเมืองจันท์ 24 กิโลเมตร มีสัญญาณไฟจราจร ณ สามแยกห้วยสะท้อน ป้ายเลี้ยวซ้ายไปทางวัดเขาสุกิมขับเข้าไปประมาณ 19 กิโลเมตร 

เส้นทางที่2 หากมาจากทางศาลากลางจังหวัดจันทบุรีให้มาทางถนนรักษ์ศักดิ์ชมูล ระยะทางประมาณ 6.6 กม.ถึงสี่แยกไฟแดงเขาไร่ยาให้เลี้ยวซ้ายเข้าสู่ถนนสุขุมวิท(หมายเลข 3) ไปทางกรุงเทพฯระยะทางประมาณ 5.9 กม.ถึงสี่แยกเนินสูงให้เลี้ยวขวาเข้าไปทางวัดเขาสุุกิม(หมายเลข3322)ระยะทางประมาณ 10.5 ก.ม.  รวมระยะทางจากศาลากลางจังหวัดจันทบุรีถึงเทศบาลตำบลเขาบายศรีประมาณ 23 กม.