Inka-samhället var en vertikal hierarkisk organisation som var indelad i fyra sociala klasser. Högst upp i skiktet stod Sapa Inca, den mäktigaste personen i imperiet. Nedanför fanns kungahuset, som bestod av Sapa Incas söner och hans nära släktingar. Den tredje sociala klassen var adeln, som omfattade kungliga släktingar och de som uppnådde rang genom sina tjänster, t.ex. präster och hövdingar. Längst ner i den pyramidala samhällsstrukturen fanns ayllu som omfattade majoriteten av befolkningen.
Ayllu-arbetare som plockar potatis som en del av sitt mitaarbete
.
Samhället i Anderna byggdes upp kring ayllu. Alla dess medlemmar hade någon form av familjeband, som en utvidgad familj. De trodde alla att de var ättlingar till en gemensam förfader. Ledaren för ayllu var curaca. Ayllu var också basen för den ekonomiska verksamheten. Ayllu-medlemmarna bearbetade jorden och tog hand om boskapen för att få mat och kläder, och de arbetade i gruvorna eller som vävare. De var alla skyldiga att arbeta och bidra till mita eller skatt. I utbyte skulle inkan garantera mat under hela året, tillhandahålla jordbruksprodukter som inte producerades i området, utbildning och hälsovård.