当前位置: 首页 > news >正文

网站可以在手机上做吗中国软文网官网

网站可以在手机上做吗,中国软文网官网,做公益筹集项目的网站,传媒公司排行榜Vercel部署FreeGPT35有严重限制,玩玩就好,真用还是得docker。 限制原因: Vercel的流式响应并不是一开始写流,客户端就能立刻收到响应流,而是先写到一个缓冲区,当流关闭才一股脑的流式响应回来(不是实时流) 因此导致: …

Vercel部署FreeGPT35有严重限制,玩玩就好,真用还是得docker。

  • 限制原因: Vercel的流式响应并不是一开始写流,客户端就能立刻收到响应流,而是先写到一个缓冲区,当流关闭才一股脑的流式响应回来(不是实时流)

  • 因此导致: 超过10s之后才要关闭的流,通通接收不到。(因为Vercel免费版持续时间最大值10秒)

  • 解决办法: 氪金!!! Vercel Pro 超时上限为300s,Pro用户部署完成后,到Vercel的Setting->Git->Production Branch填写为vercel-pro然后Save保存后部署该分支即可获得300s超时上限。

Docker来部署

可以使用以下任意镜像:

docker run -p 3040:3040 ghcr.io/missuo/freegpt35
docker run -p 3040:3040 missuo/freegpt35

启动之后可以在终端进行测试

curl http://127.0.0.1:3040/v1/chat/completions \-H "Content-Type: application/json" \-H "Authorization: Bearer any_string_you_like" \-d '{"model": "gpt-3.5-turbo","messages": [{"role": "user","content": "Hello!"}],"stream": true}'

Docker Compose 部署

原作者提供了两种部署方式,一种仅提供GPT35服务,另外一个与ChatGPT-Next-Web一起部署。

  1. 仅GPT35服务

mkdir freegpt35 && cd freegpt35
wget -O compose.yaml https://raw.githubusercontent.com/missuo/FreeGPT35/main/compose.yaml
docker compose up -d

部署完成之后,访问http://[IP]:3040/v1/chat/completions来使用API服务。

  1. 与ChatGPT-Next-Web一起部署

mkdir freegpt35 && cd freegpt35
wget -O compose.yaml https://raw.githubusercontent.com/missuo/FreeGPT35/main/compose_with_next_chat.yaml
docker compose up -d

部署完成之后,访问http://[IP]:3000来访问ChatGPT-Next-Web的页面进行使用。

image-20240410140129378

进入设置,选择OpenAI的模型服务商,接口地址填写你刚创建的 ip+ 3040,ApiKey随便填写一个,模型可以写-all,+gpt-3.5-turbo

image-20240410140238658

新建对话进行测试

image-20240410140354195

使用Nginx来负载均衡

在nginx中使用以下配置来进行负载均衡。

upstream freegpt35 {server 1.1.1.1:3040;server 2.2.2.2:3040;
}location ^~ / {proxy_pass http://freegpt35; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header REMOTE-HOST $remote_addr; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection "upgrade"; proxy_http_version 1.1; add_header Cache-Control no-cache; proxy_cache off;proxy_buffering off;chunked_transfer_encoding on;tcp_nopush on;tcp_nodelay on;keepalive_timeout 300;}

以上就是使用Docker部署FreeGPT35的方式,感兴趣的话可以尝试一下。在部署好 GPT35 服务之后,我们可以在任何应用程序中使用它,例如 OpenCat、Next-Chat、Lobe-Chat、Bob 等。可以随意使用任何字符串填写 API 密钥,例如 gptyyds

Bob中使用配置如下图:

bob

不过最好还是建议使用官方的服务毕竟更加稳定,升级到GPT4.0服务,可以按照Plus升级教程升级。若还没有GPT账号,请移步获取GPT账号Pronton版或获取GPT账号Gmail版。

原文链接:使用Docker部署开源项目FreeGPT35来免费调用ChatGPT3.5 API

http://www.tj-hxxt.cn/news/73957.html

相关文章:

  • 珠江摩尔网站建设安装百度
  • 市政房城乡建设委官方网站浏览器网址
  • 网页游戏大全2010seo需要培训才能找到工作吗
  • 网站分析怎么做武汉网站优化公司
  • 仿牌外贸网站建设国内军事新闻最新消息
  • 南宁营销型网站万能软文范例800字
  • 网站开发设计制作合同网络建站优化科技
  • 企业网站开发费用包括哪些广告安装接单app
  • 惠州做百度网站多少电商推广和网络推广的策略
  • 网站底色什么颜色好看旅游搜索量环比增188%
  • 免费企业网站建设介绍百度一下你就知道啦
  • 如何快速做网站排名曼联官方发文
  • 电子商务网站建设 下载哪里有培训班
  • wordpress 首页慢郑州技术支持seo
  • 二手车辆交易网站如何做百度的首页
  • 体验好的网站软文模板app
  • 外国优秀设计网站上海网站外包
  • 自己做的网站怎么连接域名推广赚钱的平台
  • 上海建设银行网站百度资源搜索平台
  • 陈木胜去世seo怎么做优化排名
  • 做资料网站违法百度关键词排名用什么软件
  • WordPress大前端DUX5.1手机优化器
  • 公司网站简介怎么做小广告网页
  • 怎么做视频的网站免费的网络营销方式
  • 网校网站怎么做佛山网站排名提升
  • 网站建设公司外链怎么做更先进的seo服务
  • 青岛迅优网站建设手机上可以创建网站吗
  • 网站首页原型图咋做百度seo收录软件
  • 无锡上海网站建设什么平台可以打广告做宣传
  • bluehost 网站后台腾讯云服务器