โรงเรียนบ้านสวายสอ เดิมเป็นศาลาวัด อันเป็นสถานสาธารณะโดยท่านพระครูโศภณธรรมคุตถ์ อดีตเจ้าคณะอำเภอนางรองคิดสร้างไว้ที่วัดบ้านสวายสอ จึงได้ทำการสอนนักเรียนเป็นปฐมฤกษ์ เมื่อวันที่ 20  เมษายน 2483 โดยทางราชการได้แต่งตั้งให้นายเสน่ห์  ศรีณรงค์ เป็นครูใหญ่  มีนักเรียนทั้งสิ้น  28  คน ต่อมาในปี 2505  ได้ก่อสร้างอาคารเรียนหลังใหม่ในที่ดินของโรงเรียนและย้ายนักเรียนมาเรียนจนถึงปัจจุบัน มีเนื้อที่ 21 ไร่  3  งาน  7  ตาราง(ที่ราชพัสดุ) อยู่ห่างจากสำนักงานเขตพื้นที่การศึกษาบุรีรัมย์เขต 3 ไปทางทิศตะวันออกเฉียงใต้ประมาณ  10  กิโลเมตร มีอาณาเขตติดต่อ ดังนี้

                                                ทิศตะวันออก ติดที่นาของนายเหว็ง  ตุ่มมะเริงและที่นาของนายแคล้ว  วรนุช

                                                ทิศเหนือติดที่นาของนายกำปัน  ฉิมวัย และที่นาของนายล้อม  คอนกรีต

                                                ทิศตะวันตกติดถนนทางหลวงชนบทสายบ้านผักหวาน – บ้านเจริญสุข

                                                ทิศใต้ติดที่นาของนายจรัญ  สายรุ้ง ที่นาของนายพยุง  สายรุ้ง และที่สาธารณประโยชน์(หน่วย ร.พ.ช.ที่ 5)