完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>
標簽 > LLM
在人工智能領(lǐng)域,LLM代表“大型語言模型”。在人工智能(AI)領(lǐng)域自然語言處理(NLP)是一個快速進展的領(lǐng)域。NLP中最重要是大語言模型(LLM)。大語言模型(英文:Large Language Model,縮寫LLM),也稱大型語言模型,是一種基于機器學(xué)習(xí)和自然語言處理技術(shù)的模型。
文章:314個 瀏覽:640次 帖子:3個
2025年,如何提升大型語言模型(LLM)的推理能力成了最熱門的話題之一,大量優(yōu)化推理能力的新策略開始出現(xiàn),包括擴展推理時間計算、運用強化學(xué)習(xí)、開展監(jiān)督...
樹莓派秒變編程助手:Ollama+Continue的簡易搭建教程!
以下是如何在RaspberryPi上運行大型語言模型(LLM)的方法。本文的目標是找出在RaspberryPi上運行LLM是否是ChatGPT和GitH...
2025-03-27 標簽:Raspberry Pi樹莓派LLM 152 0
基于DBFP與DB-Attn的算法硬件協(xié)同優(yōu)化方案
本文討論了LLM推理過程對計算資源需求急劇攀升的背景下,現(xiàn)有量化和剪枝技術(shù)、新數(shù)據(jù)格式存在的不足,提出動態(tài)塊浮點數(shù)(DBFP)及其配套算法-硬件協(xié)同框架...
內(nèi)部業(yè)務(wù)支撐&前瞻技術(shù)布局 One4All下一代生成式推薦系統(tǒng)
作者:京東零售 申磊 自LLM在自然語言處理等領(lǐng)域取得了矚目成就之后,學(xué)術(shù)界積極探索生成式模型對搜廣推系統(tǒng)的增強或改進方式[1],現(xiàn)有工作大體可以分為兩...
NVIDIA大語言模型在推薦系統(tǒng)中的應(yīng)用實踐
推薦系統(tǒng)的主要任務(wù)在于根據(jù)用戶的過往行為預(yù)測其潛在興趣點,并據(jù)此推薦相應(yīng)的商品。在傳統(tǒng)的推薦系統(tǒng)中,當(dāng)處理用戶請求時,會觸發(fā)多個召回模塊,例如熱門商品召...
2025-03-05 標簽:NVIDIA模型推薦系統(tǒng) 530 0
用PaddleNLP在4060單卡上實踐大模型預(yù)訓(xùn)練技術(shù)
作者:算力魔方創(chuàng)始人/英特爾創(chuàng)新大使劉力 之前我們分享了《從零開始訓(xùn)練一個大語言模型需要投資多少錢》,其中高昂的預(yù)訓(xùn)練費用讓許多對大模型預(yù)訓(xùn)練技術(shù)感興趣...
2025-02-19 標簽:數(shù)據(jù)集大模型LLM 718 0
大語言模型的解碼策略與關(guān)鍵優(yōu)化總結(jié)
本文系統(tǒng)性地闡述了大型語言模型(LargeLanguageModels,LLMs)中的解碼策略技術(shù)原理及其實踐應(yīng)用。通過深入分析各類解碼算法的工作機制、...
在NVIDIA TensorRT-LLM中啟用ReDrafter的一些變化
Recurrent Drafting (簡稱 ReDrafter) 是蘋果公司為大語言模型 (LLM) 推理開發(fā)并開源的一種新型推測解碼技術(shù),該技術(shù)現(xiàn)在...
新品 | Module LLM Kit,離線大語言模型推理模塊套裝
●●●PART.01產(chǎn)品簡介ModuleLLMKit是一款專注于離線AI推理與數(shù)據(jù)通信接口應(yīng)用的智能模塊套件,整合了ModuleLLM與Module13...
英偉達GTC2025亮點:電信行業(yè)領(lǐng)先企業(yè)啟用代理式AI優(yōu)化網(wǎng)絡(luò)運維
Amdocs、BubbleRAN、ServiceNow、軟銀集團與 Tech Mahindra 基于 NVIDIA AI Enterprise 開發(fā)大型...
作者:算力魔方創(chuàng)始人/英特爾創(chuàng)新大使劉力 一,簡介 AnythingLLM 是一個功能強大且靈活的工具,專為在本地環(huán)境中部署和管理知識庫而設(shè)計。它支持多...
大模型基礎(chǔ)能力越來越高,各行各業(yè)都希望運用AIGC降本增收,卻面臨如何結(jié)合自身業(yè)務(wù)場景優(yōu)化的難題。為了幫助客戶快速打造符合其業(yè)務(wù)需求的AIGC應(yīng)用,足下...
TeleAI提出COPO對齊方法:8B模型超越Llama3-70B的表現(xiàn)
在自然界中,好奇心驅(qū)使著生物探索未知,是生存和進化的關(guān)鍵。人類,作為地球上最具智能的物種,其探索精神引領(lǐng)了科技、文化和社會的進步。1492 年,哥倫布懷...
實戰(zhàn)案例 | 眺望RK3588 RKLLM部署DeepSeek-R1全流程
前言:在RK3588上部署Deepseek有兩種方法,分別是使用Ollama工具部署和使用瑞芯微官方的RKLLM量化部署。Ollama是一個開源的大模型...
大模型遭遇算力墻,探索超級應(yīng)用的發(fā)展路徑
最近,開源中國 OSCHINA、Gitee 與 Gitee AI? 全文如下: 大模型撞上 “算力墻”,超級應(yīng)用的探尋之路 文 / 傅聰 近日,大模型教...
大型語言模型(LLM)(如 ChatGPT、Claude 和 Meta AI)的出現(xiàn)是迄今為止人工智能領(lǐng)域最重大的進步。這項新技術(shù)也帶來了新風(fēng)險。眾所周...
新品| LLM630 Compute Kit,AI 大語言模型推理開發(fā)平臺
LLM630LLM推理,視覺識別,可開發(fā),靈活擴展···LLM630ComputeKit是一款A(yù)I大語言模型推理開發(fā)平臺,專為邊緣計算和智能交互應(yīng)用而設(shè)...
編輯推薦廠商產(chǎn)品技術(shù)軟件/工具OS/語言教程專題
電機控制 | DSP | 氮化鎵 | 功率放大器 | ChatGPT | 自動駕駛 | TI | 瑞薩電子 |
BLDC | PLC | 碳化硅 | 二極管 | OpenAI | 元宇宙 | 安森美 | ADI |
無刷電機 | FOC | IGBT | 逆變器 | 文心一言 | 5G | 英飛凌 | 羅姆 |
直流電機 | PID | MOSFET | 傳感器 | 人工智能 | 物聯(lián)網(wǎng) | NXP | 賽靈思 |
步進電機 | SPWM | 充電樁 | IPM | 機器視覺 | 無人機 | 三菱電機 | ST |
伺服電機 | SVPWM | 光伏發(fā)電 | UPS | AR | 智能電網(wǎng) | 國民技術(shù) | Microchip |
Arduino | BeagleBone | 樹莓派 | STM32 | MSP430 | EFM32 | ARM mbed | EDA |
示波器 | LPC | imx8 | PSoC | Altium Designer | Allegro | Mentor | Pads |
OrCAD | Cadence | AutoCAD | 華秋DFM | Keil | MATLAB | MPLAB | Quartus |
C++ | Java | Python | JavaScript | node.js | RISC-V | verilog | Tensorflow |
Android | iOS | linux | RTOS | FreeRTOS | LiteOS | RT-THread | uCOS |
DuerOS | Brillo | Windows11 | HarmonyOS |