Advertisement

Qwen1.5-0.5B-Chat的大模型部署方案基于OpenVINO展开量化实践

阅读量:

大模型部署方案设计

  1. 首先需完成Python解释器的安装工作
复制代码
    sudo apt update
    sudo apt upgrade
    sudo apt install python3
    
    
      
      
      
    
在这里插入图片描述

生成一个.py文件,并将相应的代码内容编写至其中

复制代码
    touch download_model.py
    
    
      
    
在这里插入图片描述

接下来执行

复制代码
    python3 ./download_model.py
    
    
      
    

![在这里插入图片描述](https://ad.itadn.com/c/weblog/blog-img/images/2025-05-31/7g5dGP

全部评论 (0)

还没有任何评论哟~