Di dalam harem, hanya dua sosok yang kedudukannya lebih tinggi dari permaisuri: kaisar dan ibu suri. Sementara lainnya wajib tunduk pada titahnya. Melanggar bisa berarti mati.
Selain permaisuri juga ada empress dowager -- janda kaisar yang diberi pangkat tersebut. Di bawah permaisuri ada para consort atau selir resmi. Jumlah dan ranking mereka berbeda-beda tergantung penguasa yang berkuasa. Tak hanya itu, para kasim yang melayani para perempuan milik raja juga menjadi bagian tak terpisahkan dari harem.
Dan, untuk memastikan bahwa setiap anak yang lahir di harem adalah keturunan kaisar, pria dilarang keras memasuki kompleks istri-istri sang penguasa. Satu-satu pengecualian adalah para kasim yang telah dikebiri.