بنای تاریخی فخرالمدارس در ضلع غربی خیابان جامی واقع است و از جمله دانه های با ارزش در بافت شهری است که در ارتباط با مسجدجامع مزار و سایر ابنیه با ارزش, تشکیل بافت تاریخی شهر را میدهد. بنای تاریخی فخرالمدارس با توجه به معماری و با توجه به کتیبه سردرب ورودی آن 1332 ه.ش می‌باشد, پلان بنا با مساحتی حدود 1700 مترمربع با مصالح و مواد سنتی شامل آجر و گچ احداث شده است نمای اصلی ایوان ورودی به سمت شرق می‌باشد و سپس وارد یک فضای مربع شکل که فضای اصلی بنا است می‌شویم داخل این فضا شامل قبر و کتیبه ای با سوره فتح می‌باشد در ایوان ورودی دربهایی در سمت چپ و راست ایوان وجود دارد که با فضای ضلع شمالی و جنوبی بنا ختم می‌شود دسترسی به طبقه فوقانی و پشت بام نیز از ضلع شمالی بنا میسر است طبق کتیبه موجود بانی این بنا فخرالدین نخل احمدی است.