為了解決這個問題，這篇研究提出了一種Universal Self-adaptive Promptin....

通過人工檢查ChatGPT的回復，發(fā)現(xiàn)ChatGPT傾向于識別比標注的跨度更長的sapn，以更接近人....

你可以看到，Llama 的參數(shù)數(shù)量大概是 650 億。現(xiàn)在，盡管與 GPT3 的 1750 億個參數(shù)....

不幸的是，我們對 ChatGPT 和許多其他封閉式 LM 背后的細節(jié)幾乎一無所知：架構、epoch、....

? 最近幾年，GPT-3、PaLM和GPT-4等LLM刷爆了各種NLP任務，特別是在zero-sho....

隨著全球大煉模型不斷積累的豐富經(jīng)驗數(shù)據(jù)，人們發(fā)現(xiàn)大模型呈現(xiàn)出很多與以往統(tǒng)計學習模型、深度學習模型、甚....

RecurrentGPT 則另辟蹊徑，是利用大語言模型進行交互式長文本生成的首個成功實踐。它利用 C....

由于ChatGPT可以適用于非常多的任務，很多人認為 AI 已經(jīng)迎來拐點。李開復將此前的 AI 定義....

最近幾個月，ChatGPT 等一系列大語言模型（LLM）相繼出現(xiàn)，隨之而來的是算力緊缺日益嚴重。雖然....

十年來，人工智能領域的眾多驚人突破背后都離不開深度學習，它是使得ChatGPT、AlphaGo等得以....

? 大型語言模型能否捕捉到它們所處理和生成的文本中的語義信息？這一問題在計算機科學和自然語言處理領域....

摘要 盡管常見的大規(guī)模視頻-文本預訓練模型已經(jīng)在很多下游任務取得不錯的效果，現(xiàn)有的模型通常將視頻或者....

在本文中，將探討了transformer高效訓練方法，從存儲效率、硬件算法協(xié)同設計和計算效率三個角度....

首先，把一個模型調(diào)成一個對話機器人這件事情并不難，開源界已經(jīng)有了類似于 Alpaca, Vicuna....

天下人苦“對齊”久矣！要讓預訓練語言模型的響應和特定任務和用戶偏好對齊，動輒需要百萬示例數(shù)據(jù)集上的i....

如果自己是一個大模型的小白，第一眼看到 GPT、PaLm、LLaMA 這些單詞的怪異組合會作何感想？....

若干年前，AlphaGo Zero用兩個AI代理切磋圍棋技藝，打敗了人類。今早，符堯的一篇論文刷新了....

在demonstration selection的方法中，其中有部分方法也考慮到demonstrat....

現(xiàn)在是2023年5月，截止目前，網(wǎng)絡上已經(jīng)開源了眾多的LLM，如何用較低的成本，判斷LLM的基礎性能....

在 GPT-4 的發(fā)布報道上，GPT-4 的多模態(tài)能力讓人印象深刻，它可以理解圖片內(nèi)容給出圖片描述，....

大型語言模型（LLM）在各種自然語言處理任務上表現(xiàn)出驚人的能力。與此同時，多模態(tài)大型語言模型，如 G....

場景圖是一種結構表示，它將圖片中的對象表示為節(jié)點，并將它們的關系表示為邊。

使用RMSNorm（即Root Mean square Layer Normalization）對輸....

而最近，中文通用大模型基準（SuperCLUE）評測公布了最新結果，GPT-4 遙遙領先，而國內(nèi)成績....

WebCPM 是面壁智能自研大模型工具學習引擎 BMTools 的首個成功實踐，其特點在于其信息檢索....

最近幾個月，隨著ChatGPT的現(xiàn)象級表現(xiàn)，大模型如雨后春筍般涌現(xiàn)。而模型推理是抽象的算法模型觸達具....

關于NL2Code的發(fā)展，其實和自然語言理解的發(fā)展類似，一開始，基本都是基于專家規(guī)則進行算法設計，但....

最近幾個月，隨著ChatGPT的現(xiàn)象級表現(xiàn)，大模型如雨后春筍般涌現(xiàn)。而模型推理是抽象的算法模型觸達具....

理解自然語言中與事件相交織的時間概念是理解事件演化的重要內(nèi)容。人可以具有對事件的典型發(fā)生時間、發(fā)生頻....

本文整理了近兩年來基于LLM做vision-lanuage任務的一些工作，并將其劃分為4個類別：