وی در سال 1298  در محله ی سنگلج تهران به دنیا آمد.پدرش حسین خان از اهالی خالد آباد کاشان بود و با نواختن سه تار آشنایی و با ابوالحسن صبا دوستی داشت.در شانزده سالگی برای فراگیری ویلن به کلاس صبا رفت و پس از سه سال،سه دوره ردیف های استاد را نواخت و از زمره ی بهترین شاگردان وی درآمد.خالدی،دومین نوازنده ایست که در رادیو ایران بعد از صبا،تکنوازی کرد و خود صبا معرف و راهگشای او به رادیو بود.در سال های 1324 و 1325 برای ضبط صفحه،سفرهایی به بمبئی کرد و موفق شد به ترتیب هشتاد و بیست و پنج صفحه را ضبط کند.در سال های 34-1333 از طرف رادیو به عنوان سرپرست موسیقی انتخاب شد و در این راه هفت ارکستر برای رادیو تشکیل داد که در آن ها هر آهنگساز و نوازنده ای را به همراه یک خواننده قرار داد.خالدی یک فیلم موزیکال به نام(ماجرای زندگی) در سال 1333 و همچنین تصنیف هایی برای فیلم های شرمسار،مادر،افسونگر و چند فیلم دیگر ساخت.وی با خوانندگانی چون دلکش،ملوک ضرابی،روح بخش،قمرالملوک وزیری،جواد بدیع زاده،علی زاهدی،ادیب خوانساری،بهرام سیر،فرح پناهی،بنان عبدالعلی وزیری،قوامی و شجریان کار کرده است.خالدی در نهم آذر ماه 1369 بر اثر بیماری سرطان حنجره در بیمارستان مهر درگذشت.       روانش شاد