Serge Ehrenspeger wurde 1935 in Winterthur geboren und wuchs an der Irchelstrasse auf. Sein Vater arbeitete als Schweisser für die Firma Gebrüder Sulzer AG. In Winterthur besuchte Ehrensperger das Gymnasium und studierte anschliessend Germanistik, Geschichte, Philosophie und Psychologie an der Universität Zürich. 1962 promovierte er bei Professor Emil Staiger über Novalis. Nach dem Studium arbeitete er als Korrespondent für die Schweizer Tageszeitung «Die Tat» in London und war von 1965 bis 1967 als Werbetexter und Marktpsychologe in London und Zürich tätig. Anschliessend unterrichtete er bis 1970 an verschiedenen Mittelschulen als Gymnasiallehrer.