Ali Rıza Efendi 1841 yılında Selanik'te doğdu. Söke'den Selanik'e yerleşmiş Türkmenlerden "Kırmızı Hafız" lakaplı Ahmet Efendinin oğludur. İlkokulu Abdi Hafız Mahalle Mektebinde okudu. Selanik'te Evkaf İdaresinde katiplik, sonrada Gümrük Muhafaza Teşkilatında memurluk yaptı. Memurluğu sırasında, Hacı Sofi ailesinden Feyzullah Ağa'nın kızı Zübeyde Hanım'la evlendi.

1876 yılında da Selanik Asakir-i Milliye taburunda subay olarak görev alan Ali Rıza Efendi, daha sonra da kereste ticareti yapmaya başladı. Zübeyde Hanım'dan beş çocuğu oldu. Çocuklarından Naciye, Ömer ve Fatma fazla yaşamadı. Sadece Mustafa ve Makbule hayatlarına devam edebildi. Ali Rıza Efendi, 1888 yılında, tek oğlu Mustafa Kemal ilkokulda okuduğu sırada, rahatsızlandı ve öldü.