AMD GPU上運行。隻不過OpenCL出現得晚,編譯鏈接不像CUDA那麽穩定,開發人員需要多花一點時間
大多數AI模型都有PyTorch 或者tensorflow 實現。PyTorch 支持OpenCL,OpenCL可以在
所有跟帖:
• 你說的不錯。但時間就是金錢,而且是成千上萬億美元的規模。 -uptrend- ♂ (0 bytes) () 02/03/2024 postreply 22:12:46
• 所以現階段大家訓練模型都是用Nvidia GPU,但將來運行大模型就會用各種自研的芯片 -study169- ♂ (50 bytes) () 02/03/2024 postreply 22:18:50
• Nvidia GPU的更新換代很快,沒那麽容易被替代。 -uptrend- ♂ (0 bytes) () 02/03/2024 postreply 22:23:35
• 隻是LLM基礎模型訓練要求高。LLM微調訓練筆記本就可以勝任了。我們公司幾乎所有項目都是AI,連A100 -study169- ♂ (18 bytes) () 02/03/2024 postreply 22:28:05
• 開源的LLM雖然能微調,但是性能不咋樣,用於專項評測時和隨機回答的結果差不多。你公司用的是開源的SLMs吧? -uptrend- ♂ (0 bytes) () 02/03/2024 postreply 22:37:14
• 除了專做LLM基礎模型的,大多數公司用開源模型,我們也是。AI應用有太多細分領域 -study169- ♂ (0 bytes) () 02/03/2024 postreply 22:52:15
• 一個同事用筆記本做過演示 -study169- ♂ (300 bytes) () 02/04/2024 postreply 04:17:05