【上海人工智能實驗室開源多模態(tài)大模型“書生?萬象 3.0”：能同時處理文本和多模態(tài)輸入】該團隊提出了一種創(chuàng)新的原生多模態(tài)預(yù)訓(xùn)練方法，與傳統(tǒng)的先優(yōu)化大語言模型再添加視覺能力的方法不同，這種方法在模型的預(yù)訓(xùn)練階段將文本數(shù)據(jù)與多模態(tài)數(shù)據(jù)無縫結(jié)合，讓模型能夠同時學(xué)習(xí)語言和視覺。