ลอร์ดโรเบิร์ต ครอว์ลีย์ เอิร์ลแห่งแกรนธัม (ฮิวจ์ บอนเนวิลล์) มองว่ามรดกของครอบครัว โดยเฉพาะบ้านในชนบทหลังใหญ่ที่ชื่อดาวน์ตันแอบบีย์ คือภารกิจในชีวิตของเขา การเสียชีวิตของทายาทบนเรือไททานิคทำให้แมทธิว ครอว์ลีย์ (แดน สตีเวนส์) ลูกพี่ลูกน้องห่างๆ ของเขา ซึ่งเป็นทนายความจากแมนเชสเตอร์ กลายเป็นบุคคลถัดไปในลำดับถัดไปและยอมย้ายเข้าไปอยู่ในคฤหาสน์หลังใหญ่กับแม่ของเขาที่เป็นคนทันสมัยและเข้ากับสังคมได้มากกว่า ซึ่งขัดแย้งกับแม่ของลอร์ดผู้เผด็จการและหัวโบราณ ซึ่งเป็นเคาน์เตสผู้เป็นม่าย การแต่งงานระหว่างลูกสาวทั้งสองเป็นอีกเรื่องหนึ่ง ในขณะเดียวกัน พ่อบ้านก็ดูแลพนักงานที่รับใช้ครอบครัว แต่ใช้ชีวิตส่วนใหญ่อยู่ในที่พักของคนรับใช้ และสร้างความสนใจในหมู่พวกเขาเอง