Advertisement

【LLM】Ollama开发指南

阅读量:

安装必要工具

  • cmake需采用3.24及以上版本
    • go语言应使用1.22及以上版本
    • gcc建议配置为11.4.0及以上版本
复制代码
    brew install go cmake gcc
    
    
    AI写代码bash

可选择开启调试模式并启用更加详尽的日志记录:

复制代码
    # 在构建时
    export CGO_CFLAGS="-g"
    
    # 运行时
    export OLLAMA_DEBUG=1
    
    
    AI写代码bash

获取必要的软件库并搭建本地大语言模型的代码框架:

复制代码
    go generate ./...
    
    
    AI写代码bash

接下来进行Ollama的搭建过程:

复制代码
    go build .
    
    
    AI写代码bash

此刻可执行ollama程序:

复制代码
    ./ollama
    
    
    AI写代码bash

Linux

Linux __ CUDA(NVIDIA)

您的操作系统所采用的发行版本或许已集成NVIDIA CUDA软件包。尽管发行版自带的软件包更具优势,但不同版本的安装流程可能存在差

全部评论 (0)

还没有任何评论哟~