Albert S. Ruddy çocukluğunu annesiyle birlikte New York'ta geçirdi. New York Şehir Koleji'nde kimyasal mühendislik çalışması bursu kazanmadan önce Brooklyn Teknik Yüksekokulu'na katıldı. Güney Kaliforniya Üniversitesi'nde Mimarlık Okulu'ndan mezun oldu ve Doğu Yakası'nda inşaat sektöründe çalıştı. Warner Brothers'ta kısa bir müddet geçirdikten sonra Jack Warner ile tanışma fırsatı yakaladı ve ardından Rand Corporation'da programcı stajyeri oldu.