vps搭中转gpt延迟优化的问题

2026-07-09 13:57 1

几个朋友搭个中转,一起用codex,最近一直在研究怎么能把首字延迟降下来,尤其是不知道应该优化国内到vps这段还是应该优化VPS到gpt这段,想请各位佬给点意见。目前是一个HK的三网线路机+龟壳新加坡的中转vps,大概延迟是50ms+38ms,然后测试服务器到gpt的http平均请求延迟是200ms;又找了个LA的vps,国内到LA大概180~200,测了下到GPT的请求平均80ms;又测了个日本的机器基本也是,60ms+180ms。现在有点懵逼了,不知道那段重要,之前主要是优化国内到VPS这段。。

最新回复 (8)
  • uu 07-09 14:01
    1


    我没优化过,我这首字算快吗?

  • 楼主 07-09 14:05
    2

    我觉得跟我的差不多,这个首字也要看任务复杂度,不能直接看单一的

  • thr1f1sh 07-09 14:07
    3

    想用公司服务器搭建一个gpt中转,采用tailscale 的方式给打通了, 会不会延迟巨高。

  • Amamiya 07-09 14:07
    4

    线路稳定即可,首字和这个没关系,你这些线路加一起也就几百ms延迟,首字要看任务上下文大小,openai负载等等

  • 大飞 07-09 14:08
    5

  • zlchao 07-09 14:11
    6

    优化来优化去也就那样 差不了多少的

  • 未央花 07-09 14:13
    7

    我的是这个,白天会慢点

  • 冰原Bill 07-09 14:54
    8

    只要你的网络总延迟不超过300ms,那优不优化无所谓。

    openai随便一个负载波动的影响都要超过1s了。

* 帖子来源Linux.do
返回