| tags: [ AI LLM ] categories: [ Development ]
LLM: 大语言模型
国内大语言模型
序号 | 名字 | 网址 | 访问方式 | 备注 |
---|---|---|---|---|
1 | Kimi Chat | https://www.moonshot.cn | web + app | 月之暗面 Moonshot |
2 | 智谱清言 | https://chatglm.cn | web + app | 智谱 |
3 | 通义千问 | https://tongyi.aliyun.com | web + app | 阿里 |
4 | 文心一言 | https://yiyan.baidu.com | web + app | 百度 |
5 | 海螺问问 | https://yingshi-ai.com (原名「应事AI助手」) | web + app | Minimax |
6 | 讯飞星火 | https://xinghuo.xfyun.cn | web + app | 讯飞 |
7 | 抖音豆包 | https://www.doubao.com | web + app | 抖音 |
8 | 360智脑 | https://ai.360.cn | web + app | 360 |
9 | 混元助手 | https://hunyuan.tencent.com/bot/chat | web + mini app | 腾讯 |
10 | 百川智能 | https://www.baichuan-ai.com | web | 搜狗 |
11 | 商汤商量 | https://chat.sensetime.com | web | 商汤 |
12 | 紫东太初 | https://taichu-web.ia.ac.cn | web | 中科院 |
13 | DeepSeek | https://chat.deepseek.com | web | |
14 | 零一万物 | https://01.ai | 模型 | 开 |
15 | 书生・浦语 | https://intern-ai.org.cn | 模型 | |
16 | 华为盘古 | https://pangu.huaweicloud.com | 无 | 开放给企业申请 |
生产环境运行 LLM
- vLLM: https://docs.vllm.ai/en/latest/
- Triton TensorRT-LLM: https://github.com/NVIDIA/TensorRT-LLM
- BentoML: https://github.com/bentoml/BentoML
消费级 PC 运行 LLM
- https://github.com/ggerganov/llama.cpp
- https://github.com/SJTU-IPADS/PowerInfer
- https://ollama.ai , https://github.com/ollama-webui/ollama-webui
- https://gpt4all.io/index.html
- https://github.com/oobabooga/text-generation-webui
- https://github.com/imartinez/privateGPT
- https://github.com/xorbitsai/inference
- https://github.com/withcatai/catai 基于 node-llama-cpp
- https://lmstudio.ai
- https://github.com/langchain-ai/langchain
- https://github.com/mudler/LocalAI