Love Affair In The Afternoon, kocasının tayiniyle küçük bir şehre taşınan evli bir kadının, sıradan hayatını altüst eden yasak bir yakınlaşmayı konu alıyor. Son Ji Eun, yeni düzenine alışmaya çalışır ve bir markette yarı zamanlı işe girer. Sessiz ve içine kapanık yapısı yüzünden çevresiyle kolay bağ kuramaz, günleri aynı tempoda geçer. Bu tekdüze hayat, kasabadaki okulda biyoloji öğretmeni olan Yoon Jung Woo ile tanışınca değişmeye başlar. Başında Park Ha-seon'un olduğu Son Ji Eun, bu karşılaşmadan sonra evliliğine ve seçimlerine başka gözle bakar. Yoon Jung Woo da kendi hayatındaki yüklerle uğraşırken Ji Eun'a yaklaşır. İkisi, küçük bir şehirde atılan her adımın fark edildiğini bilerek duygularını bastırmaya çalışır.