Qiming Venture Partners : GPT4 verra le jour en Chine d'ici 2024 au plus tard, et le texte long est la clé des grands modèles de langage

Auteur : Zhao Ying

Source de l'image : générée par l'outil d'IA illimitée

Le vendredi 7 juillet, deuxième jour de la Conférence mondiale sur l'intelligence artificielle, Zhou Zhifeng, partenaire de Qiming Venture Partners, a partagé sur le modèle d'IA et la tendance de développement de l'ensemble de l'industrie.

Qiming Venture Capital est l'une des premières institutions de capital-risque en Chine à prêter attention et à être la plus active dans le domaine de l'IA. Ses sociétés d'investissement sont situées tout au long de la chaîne écologique de l'IA. L'amont, le milieu et l'aval ont en fait des conceptions, tels que les puces, les logiciels de base, et comme les grands modèles et les applications verticales en aval, etc.

Le premier principe des grands modèles est de compresser les connaissances, informations et données numériques

Zhou Zhifeng a souligné que la puissance de calcul à grande échelle et les données à grande échelle sont très importantes pour le développement futur de l'IA. **

**Le premier principe de la formation à grande échelle est de compresser à grande échelle toutes les informations et données de connaissance numérisées du monde humain. ** Vous pouvez voir à partir de ce premier principe que la puissance de calcul à grande échelle et les données à grande échelle sont très importantes pour le développement futur de l'IA, et en effet la puissance de calcul à grande échelle et les données à grande échelle sont les puces des êtres humains dans le passé 40 ans Ces technologies s'accumulent en continu dans divers domaines du big data d'Internet, et favorisent alors l'explosion de l'IA. Génération d'apprentissage pré-formation à grande échelle, la logique sous-jacente de toute la tendance est en fait très claire, et elle continuera à se développer à grande vitesse à l'avenir. L'apprentissage en profondeur est appelé AI1.0 par l'industrie du capital-risque, principalement parce qu'il est destiné à une petite tâche spécifique. Un petit modèle formé à partir d'un petit ensemble de données spécifique, et il s'agit principalement de reconnaissance de formes, telles que la reconnaissance faciale et la reconnaissance vocale. L'apprentissage du champ de la parole à grande échelle d'aujourd'hui est plus communément appelé AI2. 0, principalement parce qu'il est général Le grand modèle formé par les données a la capacité de générer de la prise de décision.

La vague d'IA2.0 va reconstruire toute la structure industrielle

Zhou Zhifeng a en outre souligné que la nouvelle vague d'IA2.0 reconstruira l'ensemble de la structure industrielle. La structure écologique entière sera divisée en trois couches, la couche inférieure est la couche d'infrastructure, le côté droit fournit la puissance de calcul, comme le moteur de volcan aws, Alibaba Cloud, etc. fournissent de telles plates-formes de centre informatique, le côté droit est l'outil chaîne, et principalement pour les grands modèles Optimiser la formation, le raisonnement et le déploiement.

La couche intermédiaire est la plus importante. La première couche est la couche modèle. La couche modèle a également plusieurs modes. Le premier consiste à fournir le modèle de base du modèle de base, puis à exporter le modèle vers le monde extérieur et à personnaliser le modèle via l'API.

Ensuite, il existe un autre type de grand modèle auto-construit. Après avoir créé son propre grand modèle, il l'optimisera pour un scénario spécifique spécifique à l'industrie, puis fournira une solution de bout en bout du modèle à l'application.

Dans la troisième couche de la couche d'application, la première consiste à implémenter directement l'application verticale via des modèles auto-construits. Peut-être que 80 à 90 % des entreprises à gauche sont celles qui utilisent les capacités de modèles tiers pour créer des scénarios familiers ou industries Une application, **C'est l'architecture à trois niveaux que nous comprenons.En effet, cette nouvelle architecture a également entraîné de grands changements dans la façon dont le monde entier construit des produits. ** Le côté gauche, c'est en fait les dernières décennies. Qu'il s'agisse d'une voiture ou d'un logiciel social sur Internet, c'est en fait une telle structure, c'est-à-dire que le chef de produit obtient les besoins de l'utilisateur et le développeur obtient la conception du chef de produit, puis l'utilisateur l'utilise.Produits développés à utiliser.

Dans le passé, Tencent faisait du bon travail, Alibaba faisait du bon travail et n'importe quelle entreprise faisait du bon travail. En un sens, il disait qu'il tournait le volant d'inertie le plus efficacement et qu'il était capable d'itérer en continu le volant d'inertie.

Il existe deux types d'entreprises du futur : +IA, AI+

En ce qui concerne le développement industriel, Zhou Zhifeng a souligné que les futures entreprises seront divisées en deux types : +AI et AI+.

À l'avenir, il s'agira davantage d'intégrer les capacités de la nouvelle génération d'IA dans le flux de travail, ** il s'agit en fait d'une amélioration de l'ancienne scène. ** Il y a une autre catégorie où il va utiliser cette capacité pour construire un nouveau produit, qui est en fait une application de l'IA dite native, que j'appelle le remodelage d'anciennes scènes, ou la création de nouvelles scènes. **

À l'heure actuelle, il existe encore quelques entreprises d'IA très leaders, principalement parce que l'IA n'a pas réalisé une telle situation réelle d'autonomisation de toutes les industries, et son industrialisation n'est pas satisfaisante. Zhou Zhifeng a dit :

ChatGTP a relancé la vague de l'IA2.0. Vous pouvez voir que l'ensemble du financement mondial a connu une évolution phénoménale. Cette fois, ce sera une bulle qui durera deux ans et puis s'effondrera ou va-t-elle vraiment avancer et se développer ? Pour une intelligence artificielle générale, je pense que c'est une question très intéressante.

Le grand modèle deviendra certainement de plus en plus puissant. Le PDG d'OpenAI a également déclaré qu'ils pourraient intervenir dans des produits comme Microsoft et créer un produit de productivité bureautique. Ils aspirent également à un espace plus large. Pouvez-vous trouver un canal en or démarrer votre propre entreprise, et enfin aller dans un monde immense ?

Peut-être que la réalité est comme ça, la route que nous devons parcourir peut être un canyon de la mort, les deux côtés seront constamment pressés, leur technologie évolue de manière dynamique, comment pouvons-nous traverser ce canyon de la mort, je pense que c'est de l'entrepreneuriat Parfois, nous devons utiliser notre pensée rationnelle et travailler dur pour penser.

Chaque vague de technologie donnera certainement naissance à de nouveaux rois et à de nouvelles grandes entreprises.

Perspectives pour dix tendances de développement de l'IA

Dans l'attente de l'avenir, Qiming Venture Partners s'est associé à Unfinished Research pour publier conjointement un rapport à succès "Generative AI" | État de l'IA générative 2023 et a résumé dix tendances de développement :

D'abord, sur la base des informations que nous avons pu voir sur les entreprises investies par Qiming, nous savons qu'en 2024 ou même avant, la Chine disposera certainement d'un modèle multilingue comparable à GTP 4. Nous avons clairement vu les progrès de plusieurs entreprises dans ce sens.

Deuxièmement, le contexte long sera certainement un point clé dans le développement de la prochaine génération de modèles de langage à grande échelle. Nous verrons que vous pouvez effectivement avoir une communication contextuelle avec un grand modèle pendant plusieurs jours et plusieurs mois, au lieu de simplement parler pendant 3 tours et 5 tours aujourd'hui.

Troisièmement, nous pensons qu'il existe plusieurs manières de faire un grand modèle vertical, en fait, nous avons résumé 5 méthodes.

Quatrièmement, nous pensons que même si le stabele-diffusion d'aujourd'hui est une très bonne architecture de modèle de diffusion, nous pensons que qu'il s'agisse de la stabilité ou d'autres entreprises, un nouveau modèle émergera dans les deux prochaines années.

Cinquièmement, le modèle texte-image sera plus contrôlable à l'avenir, et nous avons vu que de nombreuses équipes de pointe de l'industrie ont réalisé des percées scientifiques dans ce domaine.

** Sixièmement, les troisième et quatrième trimestres de cette année seront une percée pour la génération de musique. ** Nous pensons qu'il y aura une percée majeure dans la génération de v6 et 3D l'année prochaine.

Septièmement, il y aura un développement majeur dans l'intelligence de la façon de combiner de grands modèles de langage avec de vrais robots physiques de contrôle de l'espace et des robots humanoïdes.

Huitièmement, bien que transform soit désormais le courant dominant, comme je l'ai dit, le but ultime de l'IA est d'utiliser la meilleure méthode pour compresser les informations numériques de tous les êtres humains. **transform n'est certainement pas la fin, et des architectures plus avancées apparaîtront . ** Neuvièmement, d'un point de vue commercial, nous pensons qu'au cours des trois prochaines années, les capacités des modèles et les applications ne pourront pas être découplées, et les applications vraiment perturbatrices doivent provenir des entreprises qui ont maîtrisé les capacités de R&D des modèles sous-jacents, plutôt que de pures entreprises d'application , je veux dire les applications disruptives, car on ne voit pas cette possibilité de découplage dans trois ans.

Dixièmement, c'est encore une période dorée qui peut produire des sociétés plateformes. Nous pensons que certaines start-up créées dans les trois prochaines années pourraient devenir une société d'une valeur marchande de 100 milliards de milliards de dollars.