In informatica tutto ciò ha un nome:

Exploration vs Exploitation

• Exploration: provare qualcosa di nuovo
• Exploitation: sfruttare quello che già si conosce

È un problema analizzato tutt'ora in ricerca. La variante più famosa è il: multi armed bandit:

Sei in un casinò. Ogni slot machine dà una ricompensa diversa, ma tu non sai quale sia la migliore. Hai un certo numero di tentativi, e ad ogni turno devi scegliere:

Esploro?: provo una macchina nuova per capire quanto paga.

Sfrutto?: continuo a giocare quella che finora sembra la migliore.

E il problema è capire qual è la strategia ottimale, il giusto compromesso fra esplorazione e sfruttamento, per massimizzare la somma totale delle ricompense.