Det sägs att för varje slipers som lagts i samband med bygget av järnvägen dog en man.