Hugging Face推出最小AI視覺語言模型
Hugging Face平臺于1月23日發(fā)布博文，推出了兩款令人矚目的輕量級AI模型——SmolVLM-256M-Instruct和SmolVLM-500M-Instruct。
其中，SmolVLM-256M-Instruct僅有2.56億參數(shù)，是有史以來發(fā)布的最小視覺語言模型，可在內(nèi)存低于1GB的PC上運行并提供卓越性能。SmolVLM-500M-Instruct有5億參數(shù)，主要針對硬件資源限制，幫助開發(fā)者應對大規(guī)模數(shù)據(jù)分析挑戰(zhàn)。
這兩款模型具備先進的多模態(tài)能力，可執(zhí)行圖像描述、短視頻分析以及回答關于PDF或科學圖表的問題等任務。其開發(fā)依賴于The Cauldron和Docmatix兩個專有數(shù)據(jù)集。The Cauldron包含50個高質量圖像和文本數(shù)據(jù)集，側重于多模態(tài)學習；Docmatix專為文檔理解定制，將掃描文件與詳細標題配對以增強理解。
此外，模型采用了更小的視覺編碼器SigLIP base patch-16/512，通過優(yōu)化圖像標記處理方式，減少了冗余，還將圖像編碼速率提升至每個標記4096像素，相比早期版本的每標記1820像素有了顯著改進。
Hugging Face此次推出的最小AI視覺語言模型，為AI在低資源設備上的應用開辟了新的道路。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用，如有內(nèi)容侵權或者其他違規(guī)問題，請聯(lián)系本站處理。
舉報投訴
-
人工智能
+關注
關注
1813文章
49806瀏覽量
262193 -
語言模型
+關注
關注
0文章
570瀏覽量
11274 -
AI視覺
+關注
關注
0文章
106瀏覽量
4951
發(fā)布評論請先 登錄
相關推薦
熱點推薦
NVIDIA推出面向語言、機器人和生物學的全新開源AI技術
NVIDIA 秉持對開源的長期承諾，推出了面向語言、機器人和生物學的全新開源 AI 技術，為構建開源生態(tài)系統(tǒng)做出貢獻，擴展 AI 的普及并推動創(chuàng)新。NVIDIA 正將這些
什么是AI模型的推理能力
NVIDIA 的數(shù)據(jù)工廠團隊為 NVIDIA Cosmos Reason 等 AI 模型奠定了基礎，該模型近日在 Hugging Face
如何基于Android 14在i.MX95 EVK上運行Deepseek-R1-1.5B和性能
://github.com/a-ghorbani/pocketpal-ai/releases/tag/v1.6.7
PocketPal AI 是一款開源的袖珍型 AI 助手，由直接運行的小型語
發(fā)表于 04-04 06:59
?VLM（視覺語言模型）?詳細解析
視覺語言模型（Visual Language Model, VLM）是一種結合視覺（圖像/視頻）和語言（文本）處理能力的多模態(tài)人工智能
利用英特爾OpenVINO在本地運行Qwen2.5-VL系列模型
近期阿里通義實驗室在 Hugging Face 和 ModelScope 上開源了 Qwen2.5-VL 的 Base 和 Instruct 模型，包含 3B、7B 和 72B 在內(nèi)的 3 個
海康威視推出視覺大模型系列攝像機
依托?？涤^瀾大模型技術體系，?？低晫⒋?b class='flag-5'>模型能力直接部署至端側，推出一系列視覺大模型攝像機。
添越智創(chuàng)基于 RK3588 開發(fā)板部署測試 DeepSeek 模型全攻略
在 AI 技術日新月異的當下，新的模型與突破不斷涌現(xiàn)。近期，DeepSeek（深度求索）模型以其卓越性能和親民成本，迅速在全球開發(fā)者圈子里引發(fā)熱議。作為一款強大的語言
發(fā)表于 02-14 17:42
DeepSeek模型為何掀起如此大的波瀾
DeepSeek-R1 是中國初創(chuàng)公司 DeepSeek 推出的人工智能模型，不久前，在人工智能開源平臺 Hugging Face 上發(fā)布數(shù)小時，便躍居下載量和活躍度最高
廣和通正式推出AI玩具大模型解決方案
廣和通近期推出了一款創(chuàng)新的AI玩具大模型解決方案，該方案深度融合了豆包等AI大模型，并內(nèi)置了廣和通Cat.1模組，為智能玩具的
廣和通推出AI玩具大模型解決方案
廣和通推出AI玩具大模型解決方案，該方案深度融合豆包等AI大模型、內(nèi)置廣和通Cat.1模組，助力智能玩具實現(xiàn)
新品| LLM630 Compute Kit，AI 大語言模型推理開發(fā)平臺
LLM630LLM推理，視覺識別，可開發(fā)，靈活擴展···LLM630ComputeKit是一款AI大語言模型推理開發(fā)平臺，專為邊緣計算和智能交互應用而設計。該套件的主板搭載愛芯AX63
NVIDIA推出開放式Llama Nemotron系列模型
作為 NVIDIA NIM 微服務，開放式 Llama Nemotron 大語言模型和 Cosmos Nemotron 視覺語言模型可在任何
NVIDIA推出多個生成式AI模型和藍圖
NVIDIA 宣布推出多個生成式 AI 模型和藍圖，將 NVIDIA Omniverse 一體化進一步擴展至物理 AI 應用，如機器人、自動駕駛汽車和
工商網(wǎng)監(jiān)
評論