La base è

user-agent *
disallow:

poi a seconda di come vuoi sviluppare il tutto aggiungi, ma puoi tranquillamente farlo in corso d'opera. La cosa importante è averlo!