Next token prédiction. chaînes d'infini et monde extérieur

Assomple automatique statistique? Regardez à nouveau. Il y a un espace tridimensionnel virtuel en attente de vos choix linguistiques et invite à déverrouiller les chemins dans les profondeurs de l'infini. La prédiction de jetons suivante expose le langage en tant que système auto-entretenu et, par conséquent, un bassin sans fin de possibilités. Il représente la croissance organique et la mise à l'échelle des principes mathématiques simples. Organisé en logique, il nous apprend comment nos propres pensées peuvent se développer et de quelles manières en fonction de la longueur et des voies tracées dans la mer illimitée des combinaisons possibles. Cependant, cela ne peut pas vous apprendre sur la façon dont vous mappez votre expérience directe avec le monde extérieur. Les deux mappages existent en vous, même si les LLM ont montré qu'elles peuvent exister indépendamment. Que se passe-t-il entre ces deux intégres? En tant que traducteurs et interprètes expérimentés, diraient: la déverbaliisation. Fondamentalement, la déconstruction et la reconstruction des éléments linguistiques dans la langue source afin de recomposer le sens dans la langue cible. Dans ce cas, nous passons de la perception sensorielle aux systèmes linguistiques. Du moins, c'est une approximation équitable. Néanmoins, c'est la question que vous devriez vous poser. Ici, nous avons affaire à une propriété métacognitive qui n'est pas entièrement encadrée. Les allers-retours entre l'expérience sensorielle-perceptuelle et la langue. Comment le tracez-vous? Comment pouvez-vous l'utiliser? Pourquoi est-ce un atout unique? Répondez à ces questions à vous-même et vous comprendrez où votre propre prédiction de jetons suivante vous mène et surtout, pourquoi. Cette vidéo a été inspirée par l'interview de @heoriesoverything avec Elan Barenholtz. Il y a beaucoup à dire sur cette interview, c'était vraiment bien. Je vais peut-être faire une autre vidéo sur ce sujet. Une chose est sûre, je suis arrivé à la conclusion que nous devons réfléchir stratégiquement à la prédiction des jetons suivants, non seulement avec les LLM, mais en nous-mêmes. Si vous avez regardé la vidéo entière et lu ce texte, merci beaucoup et j'espère que vous en tirez quelque chose de positif :) J'ai d'autres choses aussi sur mes autres plateformes, alors allez-y et vérifiez-la! A bientôt, Javier