1928年、イギリス北東部にある邸宅ダウントン。グランサム伯爵ロバート(ヒュー・ボネヴィル)らは、他界した三女の夫トム(アレン・リーチ)とモード・バッグショー(イメルダ・スタウントン)の娘との結婚を祝福していた。一方、長女メアリー(ミシェル・ドッカリー)は傷みが目立つ屋敷の修繕費に苦慮していたところ、屋敷で映画撮影をしたいとのオファーを受ける。さらにロバートは、母バイオレット(マギー・スミス)が南フランスの別荘を相続したことに驚き、そのいきさつに疑問を抱いた彼は家族と共に別荘へ向かう。