#1 JetMoE: Reaching Llama2 Performance with 0.1M Dollars
发表于 : 2024年 12月 28日 10:30
DeepSeek: 200 people + $5.5M cost beats Llama3.1-405B
JetMoE: 4 people + $0.08M cost beats Llama2-7B and Llama-13B
JetMoE: 4 people + $0.08M cost beats Llama2-7B and Llama-13B