Waar vroeger balkenzager De Zes Gebroeders of Het Rottennest stond, werd in 1862 nog een nieuwe zaagmolen gebouwd. Deze kreeg de naam De Vlijt, maar lang zou deze nieuwkomer het niet uithouden. Al in 1876 moest hij het veld ruimen voor een moderne stoomzagerij, waarop de molennaam De Vlijt overging.
De bovenkruier stond op een erf ten westen van de Heerenwatering achter de goederenloods van de spoorwegen.