新闻动态
-
202404-02
- 元象首个MoE大模型开源：4.2B激活参
- 元象发布XVERSE-MoE-A4.2B大模型，采用业界最前沿的混合专家模型架构（MixtureofExperts），激活参数4.2B，效果即可媲美13B模型。...
-
202404-01
- 大语言模型中常用的旋转位置编码RoPE详
- 自2017年发表的“AttentionIsAllYouNeed”论文以来，Transformer架构一直是自然语言处理（NLP）领域的基石。它的设计多年来基本没...
-
202404-01
- 0门槛免费商用！孟子3-13B大模型正式
- 澜舟科技官宣：孟子3-13B大模型正式开源！这一主打高性价比的轻量化大模型，面向学术研究完全开放，并支持免费商用。在MMLU、GSM8K、HUMAN-EVAL等...
-
202404-01
- 我的领导马斯克：痛恨开会，不要非技术中层
- 马斯克称得上是个“魔鬼老板”这事儿，已经出了名了。现在，他的老部下卡帕西（AndrejKarpathy）又在最新访谈中“锤”了他一把（doge）：我不得不恳求他...
-
202403-30
- 开源11天，马斯克再发Grok-1.5！
- Grok-1官宣开源不过半月，新升级的Grok-1.5出炉了。刚刚，马斯克xAI官宣，128K上下文Grok-1.5，推理能力大幅提升。并且，很快就会上线。11...
-
202403-29
- Mamba超强进化体一举颠覆Transf
- 之前引爆了AI圈的Mamba架构，今天又推出了一版超强变体！人工智能独角兽AI21Labs刚刚开源了Jamba，世界上第一个生产级的Mamba大模型！Jamba...
-
202403-28
- Stability AI开源3B代码生成
- 本周一，StabilityAI开源了小体量预训练模型StableCodeInstruct3B。StableCodeInstruct3B是建立在StableCod...
-
202403-26
- 清华微软开源全新提示词压缩工具，长度骤降
- 在自然语言处理中，有很多信息其实是重复的。如果能将提示词进行有效地压缩，某种程度上也相当于扩大了模型支持上下文的长度。现有的信息熵方法是通过删除某些词或短语来减...
