Steenfabrieken werden meestal bij rivieren gebouwd vanwege de, in de uiterwaarden aanwezige, klei. Zo ook in Milsbeek.
Geleidelijk moest men steeds verder van de fabriek de klei afgraven. Zo kwam het dat men omstreeks 1950 een bruggetje moest bouwen om aan andere kant van de Tielebeek de afgravingen voort te zetten. Geleidelijk kwam er een compleet smalspoor netwerk waar de kiepkarretjes aan en af reden om de fabriek van de nodige klei te voorzien.