Schaaf de schil van de citroen in repen en pers er 2 el sap uit. Snijd de ontpitte olijven doormidden. Spoel de rijst en laat goed uitlekken.
Verhit de oven tot 200 °C. Schenk 750 ml water in een middelgrote pan en voeg de kruidnagels, kardemompeulen, repen citroenschil en 1 ½ tl zout toe. Zet dit op halfhoog tot hoog vuur, breng aan de kook en neem de pan van het vuur.
Doe intussen de vier kazen en het ei in een middelgrote kom en meng alles goed. Verdeel het mengsel met je handen in 12 porties en rol er grove balletjes van circa 40 g per stuk van. Ze hoeven niet perfect te zijn, omdat ze in de rijst deels zullen smelten.
Strooi de rijst over de bodem van een braadslee of ovenschaal van circa 24 x 32 cm (of een ovenvaste braadpan van 28 cm doorsnee, waarvoor je een passend deksel hebt) en strooi de olijven erover. Schenk het hete water met de smaakmakers erbij. Beweeg de braadslee of ovenschaal voorzichtig heen en weer om de rijst gelijkmatig te verdelen en leg de kaasballetjes in de rijst. Dek de braadslee, ovenschaal of pan strak af met aluminiumfolie (of een deksel) om de stoom niet te laten ontsnappen en zet hem 25 min in de oven. Haal uit de oven en laat de rijst afgedekt 10 min rusten.
Laat terwijl de rijst rust de boter smelten in een middelgrote pan op halfhoog vuur. Voeg de chilivlokken, aleppo-chilivlokken en sumak toe, en bak ze 2-3 min. Doe de bosuitjes erbij en bak alles nog 20 sec. Neem de pan van het vuur, voeg het citroensap toe en zet opzij.
Haal de folie of het deksel van de rijst en schep de chiliboter er vlak voor het serveren over.