حكم الصلاة في مسجد تحيط به المقابر

السؤال: يوجد في قريتنا مسجد تقام فيه الجماعة ولكن تحيط به المقابر من ثلاث جهات إحداهن جهة القبلة، فهل تجوز الصلاة في هذا المسجد علماً أن الكثير من جيرانه هجروا الصلاة فيه وأصبحوا يصلون في منازلهم فهل عليهم شيء في ذلك وبماذا تنصحوننا أن نفعل؟