К тому же он занялся фотографией — первую камеру ему подарила мама. Хотя она не разделяла интересов сына, но все же решила, что юноша сможет совмещать работу раввина и занятия живописью. Поэтому она втайне от родственников подарила Солу его первую фотокамеру. Отец же настаивал на том, что сын должен оставить увлечение живописью. Фотографией, по его мнению, занимались лишь неудачники с сомнительным образом жизни.. И когда в местной еврейской газете вышла заметка о второй выставке Сола, отец разрыдался от стыда. Это было последней каплей. Юноша собрал чемодан и посреди ночи ушел из дома. Всю оставшуюся жизнь братья считали фотографа «чудиком», а отец так и не смог простить сына.
Оказавшись в Нью-Йорке Сол быстро обзавелся друзьями. Особое влияние на становление гения уличной фотографии оказала дружба с Юджином Смитом, занимающимся фотографией, и художником Ричардом Пузетт-Дартом, создававшим полотна в стиле абстракционизма.
Это был 1949 год. Тогда все снимали на черно-белую пленку. Солу удавалось создавать необычные кадры. Он не только ловил удачный ракурс, в его коллекции есть работы, на которых запечатлены образы сквозь запотевшие стекла. Сол создавал необычные работы в туман и снегопад, проливной дождь. Он не стремился передать точную картину происходящего. Лейтер отдавал предпочтение абстрактным работам, которые порождают в голове зрителя сомнения по поводу увиденного.
В 1953 году некоторые снимки фотографа были представлены на выставке в одном из Нью Йоркских музеев, где их заметили работники журналов Vogue, Esquire и Harper’s Bazaar. Они предложили Солу сотрудничество, которое длилось 20 лет, однако особых успехов за это время фотограф не добился.