С Анной Изрядновой Сергей Есенин познакомился в 1913 году в типографии Сытина. Вместе они не только работали, но учились в университете Шанявского. Вскоре у них завязался роман. Изряднова вспоминала: «Ко мне очень привязался, читал стихи. Требователен был ужасно, не велел даже с женщинами разговаривать — «они нехорошие». Настроение было у него упадочное — он поэт, никто не хочет его понять, редакции не принимают в печать, отец журит… Все жалованье тратил на книги, журналы, нисколько не думал, как жить».
Через несколько месяцев после знакомства Есенин и Изряднова начали жить вместе. Есенин почти сразу разочаровался в семейной жизни: свое предназначение он видел в литературе и поэтическом успехе. Изряднова чувствовала себя помехой: «Есенину пришлось много канителиться со мной (жили мы только вдвоем)». В 1915 году у них родился сын Юрий, а Есенин оставил Анну.
Первой официальной женой Есенина стала Зинаида Райх. Они познакомились весной 1917 года. К тому моменту Есенин уже был известным поэтом, а она работала секретарем-машинисткой в газете «Дело народа». Есенины жили в Орле, затем переехали в Петроград, оттуда в 1918 году — в Москву. Семейная жизнь вновь не ладилась, и поэт ушел от Райх. Официально они развелись только в 1921 году. В браке у Есениных родилось двое детей — дочь Татьяна и сын Константин.
Осенью 1921 года Сергей Есенин познакомился с Айседорой Дункан. Американская танцовщица приехала в страну на гастроли. Чувства между поэтом и артисткой вспыхнули практически сразу. «Это была глубокая взаимная любовь», — писал Сергей Городецкий. «Конечно, — добавлял он, — Есенин был влюблен столько же в Дункан, сколько в ее славу, но влюблен был не меньше, чем вообще мог влюбляться».
В 1922 году Сергей Есенин и Айседора Дункан поженились. Литератор решил сопровождать свою жену на гастролях в Западной Европе и США. Сам он планировал за границей вести творческую пропаганду родины. Друзьям поэт заявлял: «Я еду на Запад для того, чтобы показать Западу, что такое русский поэт». Властям обещал наладить в Берлине издательство книг русских поэтов, а в Америке — урегулировать отношения между советским государством и Штатами.
В Советский Союз пара возвратилась в 1923 году, и вскоре супруги расстались. Есенина и Дункан многое разделяло: разница в возрасте (танцовщица была старше поэта на 17 лет), языковой барьер, разница в мировоззрении. Общий товарищ Сергей Коненков писал: «Дункан была яркая, необычная фигура. Она много дала Есенину, но еще больше забрала у него нравственных и душевных сил».
Сергея Есенина «всегда тяготила семейная неустроенность, отсутствие своего угла», — писала сестра поэта Александра. Это ощущение не оставило литератора и с новыми отношениями. В 1925 году Есенин познакомился с Софьей Толстой, внучкой Льва Толстого. Через несколько месяцев они поженились. Но и этот брак не осчастливил Есенина: «Все, на что я надеялся, о чем мечтал, идет прахом. Видно, в Москве мне не остепениться. Семейная жизнь не клеится, хочу бежать». С Софьей Толстой поэт развелся через полгода совместной жизни.