Ali Rıza Efendi 1841 yılında Selanik’te dünyaya geldi. Söke’den Selanik’e yerleşmiş Türkmenlerden “Kırmızı Hafız” lakaplı Ahmet Efendinin çocuğudur. İlkokulu Abdi Hafız Mahalle Mektebinde okudu. Selanik’te Evkaf İdaresinde katiplik, daha sonra Gümrük Muhafaza Teşkilatında memurluk yaptı. Memurluğu sırasında, Hacı Sofi ailesinden Feyzullah Ağa’nın kızı Zübeyde Hanımla hayatını birleştirdi.
1876 yılında da Selanik Asakir-i Milliye taburunda subay olarak görev alan Ali Rıza Efendi, sonrasında kereste ticareti yapmaya başladı. Zübeyde Hanım’dan beş evladı oldu. Çocuklarından Naciye, Ömer ve Fatma fazla yaşamadı. Sadece Mustafa ve Makbule hayatlarına devam edebildi. Ali Rıza Efendi, 1888 yılında, tek oğlu Mustafa Kemal ilkokulda okuduğu sırada, rahatsızlandı ve vefat etti.