Zavádějící důkazy proti Johnu Batesovi se s novou výpovědí rozplynuly a on se s velkou slávou vrací na Downton. Batesův příjezd vnáší novou naději na sídlo stižené zármutkem ze smrti lady Sybil. Komorná O’Brienová se chce zbavit Thomase, aby na jeho místo mohl postoupit její synovec, lokaj Alfred. Využije k tomu jeho skrývanou sexuální orientaci a namluví mu, že na něj myslí druhý nový lokaj, pohledný Jimmy. Lady Edith se chystá jet do Londýna, kam ji na osobní setkání pozval vydavatel časopisu The Sketch Michael Gregson, který otiskl její článek. Matthewa Crawleyho čeká poslední překážka v přesvědčování sira Roberta o potřebě nové správy panství. Současně má dojít ke křtinám malé Sybil, dcery Toma Bransona a Sybil, což znamená, že na panství zavítá Tomův radikálně smýšlející starší bratr.

Schyluje se ke každoročnímu downtonskému zápasu v kriketu, kde se utká mužstvo složené z pánů a sloužících na sídle proti mužstvu se zástupci vsi. Jako vždy přikládá sir Robert zápasu nesmírný význam a dokonce je v zájmu vidiny vítězství svého týmu ochotný změnit předchozí rozhodnutí i vložit se do rozepří mezi služebnictvem. Matthew Crawley a Tom Branson spojí své síly, aby zkusili definitivně přesvědčit sira Roberta o potřebnosti změn v hospodaření panství. Do toho přijíždí na Downton sestřenice Crawleyových dcer, rozpustilá lady Rose MacClareová, která se připojí k lady Edith a Matthewovi na výlet do Londýna, kde ovšem má vlastní plány.

Při návštěvě Rose a jejích rodičů na hradě Duneagle je rodina vřele přivítána. Napětí mezi jejich hostiteli se však nedá zakrýt. Na Downtonu je Carson odhodlán udržet služebnictvo v tvrdé práci, ale nebudou vzhledem k blížícímu se venkovskému jarmarku někteří v pokušení vyzkoušet své štěstí? A mohl by se paní Patmorové poštěstit nějaký románek?

Jaro roku 1922 probíhá na panství Downton ve stínu tragické události, k níž došlo před šesti měsíci, a jíž byli diváci svědky ve finále předchozí řady. Lady Mary sužovaná žalem zanedbává svého nedávno narozeného syna George, který je v péči podezřele panovačné chůvy. Sir Robert se dostává do křížku s Bransonem ohledně spravování pozemků a vyvstávající nutnosti zaplatit dědickou daň. Také ve světě služebnictva dochází k náhlým změnám, když si bez předchozího varování sbalí kufry slečna O'Brienová. Vzniklé situace využije ke svému návratu osoba, jež má na Downtonu plány sahající mnohem dále než na post komorné.

Nález dopisu, který Matthew napsal těsně před smrtí a kde jako svou výhradní dědičku stanovuje Mary, zamíchá plány sira Roberta na vedení panství. Hraběnka-vdova Violet svou vnučku motivuje, aby se za pomoci Toma Bransona seznámila s vedením panství a do záležitostí jeho správy se aktivně zapojila. Současně se Violet pokouší nenápadně pomoci také Molesleymu, který po Matthewově úmrtí přišel o práci a musí si nyní vydělávat jako nádeník. Mladá lady Rose, která na Downtonu pobývá, zatímco její rodiče jsou v Indii, přemluví Annu, aby ji doprovodila na taneční zábavu v Yorku, kde se za dramatických okolností sblíží s mužem mimo její společenskou třídu.

Na panství se pořádá menší sešlost, kde se ukáže také lord Gillingham a začne se točit kolem Mary. Jeho komorník Green naopak nadbíhá Anně, což se vůbec nelíbí jejímu manželovi. Pan Gregson odhalí falešného hráče. Tom se necítí mezi urozenými hosty moc dobře, čehož využívá Edna. Pan Molesley vypomáhá jako druhý lokaj, což vnímá jako potupu...

Komorná Edna tlačí na Toma Bransona po společně strávené noci. Ten následně s lady Mary a Rose jede do Londýna k tetě Rosamund, která na večer potají pozvala lorda Gillighama. Společně na přání Rose vyrazí do jazzového klubu. Zde podnapilý lord Bullock uvádí Rose do rozpaků, až zakročí Jack Ross, šarmantní černošský zpěvák zdejší kapely. Mezitím v sobě Anna dusí děsivé události nedávného osudného večera, které se zdráhá vyzradit, aby její manžel, John Bates, nevzal spravedlnost do vlastních rukou, což by vzhledem k jeho předchozímu pobytu ve vězení mělo za následek jeho jisté odsouzení k smrti. Bates ovšem z jejího odtažitého chování, které vyústí až do nastěhování se zpět na sídlo Granthemů, vycítí, že se něco muselo stát, jen ještě netuší co. Michael Gregson se chystá na odjezd do Německa, kde chce zažádat o občanství, aby se mohl rozvést se svou nesvéprávnou ženou a začít nový život s milovanou Edith, kterou si pozve k sobě domů. A lord Gillingham požádá Mary o ruku.