La question est de savoir comment faire un réseau qui soit à la fois « économique » et « robuste » sans prendre trop de place. C’est une question théorique sur laquelle a travaillé le grand mathématicien russe Andrey Kolmogorov (1903-1987). Mais cette question théorique conditionne aussi la façon dont on peut construire un réseau informatique ou… un cerveau humain : pour être intelligent sans avoir la grosse tête, il faut un réseau de neurones qui soit efficace MAIS AUSSI compact !