12 октября KLCII объявила, что серия больших языковых моделей Aquila Aquila была полностью обновлена до Aquila2, и был добавлен Aquila2-34B с 34 миллиардами параметров. Сообщается, что новая модель хорошо работает в логическом выводе и обобщении, а также достигла ряда достижений в таких сценариях, как агенты, генерация кода и поиск литературы.
В то же время KLCII также выпустила семейство с открытым исходным кодом, включающее серию моделей Aquila2, новую версию семантической векторной модели BGE, эффективную инфраструктуру параллельного обучения FlagScale и высокопроизводительное подмножество вычислений внимания FlagAttention. Эти проекты с открытым исходным кодом будут способствовать совместным инновациям в исследовании больших моделей.
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
KLCII: Семейство больших языковых моделей Aquila Aquila было полностью обновлено с добавлением 34 миллиардов параметров Aquila2-34B
12 октября KLCII объявила, что серия больших языковых моделей Aquila Aquila была полностью обновлена до Aquila2, и был добавлен Aquila2-34B с 34 миллиардами параметров. Сообщается, что новая модель хорошо работает в логическом выводе и обобщении, а также достигла ряда достижений в таких сценариях, как агенты, генерация кода и поиск литературы.
В то же время KLCII также выпустила семейство с открытым исходным кодом, включающее серию моделей Aquila2, новую версию семантической векторной модели BGE, эффективную инфраструктуру параллельного обучения FlagScale и высокопроизводительное подмножество вычислений внимания FlagAttention. Эти проекты с открытым исходным кодом будут способствовать совместным инновациям в исследовании больших моделей.