mirror of
https://github.com/QwenLM/Qwen.git
synced 2026-05-20 08:25:47 +08:00
Update README_JA.md
This commit is contained in:
@@ -672,7 +672,8 @@ merged_model.save_pretrained(new_model_directory, max_shard_size="2048MB", safe_
|
|||||||
### vLLM
|
### vLLM
|
||||||
デプロイメントと高速推論のためには、FastChatとvLLMを使用することをお勧めします。まずパッケージをインストールしてください:
|
デプロイメントと高速推論のためには、FastChatとvLLMを使用することをお勧めします。まずパッケージをインストールしてください:
|
||||||
```bash
|
```bash
|
||||||
pip install vllm fastchat
|
pip install vllm
|
||||||
|
pip install "fschat[model_worker,webui]"
|
||||||
```
|
```
|
||||||
または、`git clone` と `pip install -e .` を使ってソースからインストールすることもできます。インストールに問題がある場合は、それぞれのドキュメントを読むことを勧める。
|
または、`git clone` と `pip install -e .` を使ってソースからインストールすることもできます。インストールに問題がある場合は、それぞれのドキュメントを読むことを勧める。
|
||||||
|
|
||||||
|
|||||||
Reference in New Issue
Block a user