Hadiah tersebut diberikan seiring selesainya pembangunan masjid yang dikerjakan oleh ayahnya, H. Qosod Mansyur.
Berbekal tanah tersebut Kyai Rifa’i mulai merintis cita-cita tentang sebuah lembaga pendidikan Islam modern untuk turut serta memajukan anak bangsa.
22 murid yang datang dari kalangan keluarga, karib kerabat serta masyarakat sekitar Gintung yang menjadi generasi awal santri di lembaga pendidikan ini dengan segala keterbatasan dan kekurangan.
Selama lebih kurang 30 tahun pengabdiannya Kyai Rifai telah menghasilkan 4 institusi Pendidikan yaitu Pondok Pesantren Daar el-Qolam, Pondok Pesantren La Tansa, Sekolah Tinggi Agama Islam dan Ekonomi La Tansa Mashira dan Pesantren Wisata La Lahwa yang kala itu belum rampung pembangunannya.
Sepeninggalan Kyai Rifa’i pada 1997, estafet kepemimpinan Daar el-Qolam dipercayakan kepada adik kandungnya K.H. Ahmad Syahiduddin bersama putra pertama Kyai Rifa’i, K.H. Adrian Mafatihullah Karim, MA dan adik perempuan beliau, Dra. Hj. Enah Huwaenah.
Daar el-Qolam akhirnya menjelma menjadi sebuah lembaga pendidikan Islam modern dengan format pesantren besar dengan karakteristik pesantren yang berdiri di atas dan untuk Semua Golongan.
Pondok Pesantren Daar el-Qolam telah berkembang pesat menaungi 4 institusi pendidikan yakni Daar el-Qolam 1, 2, 3 dan 4.
Sebagai upaya kaderisasi kepemimpinan yang dimotori oleh Kyai Syahiduddin sebagai pengemban amanat pertama, maka Daar el-Qolam pada tahun 2009 diamanatkan kepemimpinannya kepada KH. Nahrul Ilmi Arief untuk memimpin Daar el-Qolam 1 & 4. Sedangkan Daar el-Qolam 2 kepada KH. Odi Rosihuddin dan Daar el-Qolam 3 kepada al-Ustadz Zahid Purna Wibawa.
