Dursley ailesi ciddi anlamda gelmiş geçmiş en sorunlu aile olabilir. Harry'nin annesi Lilly'nin ablası olan Petunia, Harry'ye ailesinin ölümü hakkında yalan söyler. Lilly, aileden çıkan tek cadıdır. Bu nedenle ailede bir freak olarak görülür. Yetim kalan Harry'nin kapılarına bırakılması üzerine Petunia tüm nefretini Harry'ye döker. Vernon enişte ve Petunia teyze dünyanın en kötü ebeveynliğini yapar. Harry'ye eskimiş kıyafetler verirler, merdiven altını oda yaparlar, her imkana sahip olmalarına rağmen onu bir hizmetçi olarak kullanırlar. Bu sırada Dudley de bütün huysuzlukları, zorbalıkları yapar ve kimse ona bir şey demez.