前言
chatgpt已经成为了当下热门，github首页的trending排行榜上天天都有它的相关项目，但背后隐藏的却是openai公司提供的api收费服务。作为一名开源爱好者，我非常不喜欢知识付费或者服务收费的理念，所以便有决心写下此系列，让一般大众们可以不付费的玩转当下比较新的开源大语言模型bloom及其问答系列模型bloomz。那么废话不多说，本篇将介绍如何在个人电脑上简单的使用bloom模型生成句子。
模型介绍
bloom是一个开源的支持最多59种语言和176B参数的大语言模型。它是在Megatron-LM GPT2的基础上修改训练出来的，主要使用了解码器唯一结构，对词嵌入层的归一化，使用GeLU激活函数的线性偏差注意力位置编码等技术。它的训练集包含了45种自然语言和12种编程语言，1.5TB的预处理文本转化为了350B的唯一token。bigscience在hugging face上发布的bloom模型包含多个参数多个版本，本文中出于让大家都能动手实践的考虑，选择最小号的bloom-1b1版本，其他模型请自行尝试。
环境准备
python版本最好是3.8及以上，因为项目都会逐渐对老版本python停止支持，可能找不到现成的wheel包从而需要自己编译，而windows下需要使用VS，那是个相当痛苦的过程。
推荐pip原生虚拟环境安装，不推荐conda虚拟环境。本文的安装方法都是基于pip，如果你不懂pip虚拟环境请运行以下命令（linux如果有python2，请运行pip3）：
pip install virtualenv -i https://mirror.baidu.com/pypi/simple #安装虚拟环境包
python -m venv bloom #在当前目录创建名叫bloom的虚拟环境
创建完后如何启动： 先一路cd到根目录，即脚本文件夹所在目录，然后cd进去activate。
cd Scripts
activate
比如我这里是名叫gpt-ch的环境：
输完后这样就表示启动成功了，所有的命令都会在隔离环境里运行，安装的包也都会在gpt-ch/Lib/site-packages里：
安装pip包
如果只用cpu进行推理，只需要安装以下包：