Larbi Ben Alilou komt uit een gezin met acht kinderen. Zijn vader zit bij het Spaanse leger in Marokko. Hij komt in 1970 naar Nederland om hier een technische opleiding te volgen. Maar in plaats daarvan moet hij een jaar in de kassen van Berkel en Rodenijs werken en daarna in een lederbedrijf in Tilburg. Hierna volgt hij een opleiding MBO-SD (Sociale Dienstverlening) en daarna HBO (opleiding). Hij krijgt werk bij de Stichting Sociale en Culturele Opbouw Tilburg. In 1979 wordt hij sociaal werker op het bijkantoor van de Stichting Buitenlandse Werknemers Gooi en Eemland in Lelystad. Vanaf 1988 doet Larbi sociaal raadsliedenwerk in Amsterdam, eerst voor de gemeente Amsterdam en daarna voor het stadsdeel Amsterdam West (voorheen Bos en Lommer).