前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >ChatGPT逐字推送的秘密

ChatGPT逐字推送的秘密

作者头像
灬沙师弟
发布2023-07-08 16:55:10
1K0
发布2023-07-08 16:55:10
举报
文章被收录于专栏:Java面试教程

背景

面试官: 最近ChatGPT很火,他以聊天的形式把答案推送给你,你知道服务器逐字主动推送怎么做的吗?

了不起: 可以用Websocket协议来推送。

面试官: 还有其他方式吗?

了不起: 目前只知道这个

SSE协议

SSE(Server-Sent Events)是一种基于HTTP的服务器向客户端推送数据的机制。与WebSocket相比,SSE更加轻量级,适用于需要实时更新的Web应用程序。其通讯过程如下:

  1. 客户端向服务器发送一个HTTP请求,请求一个SSE连接。
  2. 服务器接受请求,返回一个HTTP响应,状态码为200 OK,并设置Content-Type为text/event-stream。
  3. 服务器将一系列事件发送到客户端。每个事件包含一个或多个字段,包括事件名、数据和可选的ID。这些事件通过HTTP响应的正文部分发送。
  4. 客户端通过持续连接保持连接打开,并接收服务器发送的事件。每个事件都以一个“data:”字段开头,后面跟着实际的数据。如果事件包含事件名称,则其名称以“event:”字段开头。如果事件包含ID,则其ID以“id:”字段开头。
  5. 客户端可以通过JavaScript代码监听SSE事件,以便在事件到达时执行某些操作。例如,可以使用EventSource对象的onmessage回调函数来处理收到的消息。
  6. 如果客户端希望关闭连接,可以发送一个HTTP请求,其中包含“Connection: close”头部。服务器将关闭连接,并停止向客户端发送事件。

代码实现

SseEmitter是一个Spring框架中的类,用于实现服务器发送事件(Server-Sent Events)的功能。它允许服务器向客户端发送一系列的数据,而无需客户端不断地发送请求。以下是使用SseEmitter实现的步骤:

  1. 创建一个SseEmitter对象,该对象将用于向客户端发送事件。
  2. 在SseEmitter对象上注册一个CompletionCallback,以便在SseEmitter关闭时执行一些操作。
  3. 在SseEmitter对象上调用send()方法,向客户端发送数据。
  4. 在需要时可以调用complete()方法或completeWithError()方法,以结束SseEmitter并关闭连接。

例如,以下代码演示了如何在Spring MVC中使用SseEmitter发送一个简单的消息:SseEmitter是一个Spring框架中的类,用于实现服务器发送事件(Server-Sent Events)的功能。它允许服务器向客户端发送一系列的数据,而无需客户端不断地发送请求。以下是使用SseEmitter实现的步骤:

  1. 创建一个SseEmitter对象,该对象将用于向客户端发送事件。
  2. 在SseEmitter对象上注册一个CompletionCallback,以便在SseEmitter关闭时执行一些操作。
  3. 在SseEmitter对象上调用send()方法,向客户端发送数据。
  4. 在需要时可以调用complete()方法或completeWithError()方法,以结束SseEmitter并关闭连接。

例如,以下代码演示了如何在Spring MVC中使用SseEmitter发送一个简单的消息:

代码语言:javascript
复制
@GetMapping("/stream")
public SseEmitter stream() {
  SseEmitter emitter = new SseEmitter();
  try {
    emitter.send("Hello, world!");
    emitter.complete();
  } catch (IOException e) {
    emitter.completeWithError(e);
  }
  return emitter;
}

在这个例子中,我们创建了一个SseEmitter对象,并向客户端发送了一条消息。然后,我们调用了complete()方法,以结束SseEmitter并关闭连接。如果在发送消息时发生了任何错误,我们将调用completeWithError()方法,以关闭连接并抛出异常。

对比Websocket

SSE(Server-Sent Events)和Websocket都是用于实现服务器和客户端之间实时通信的技术,但它们有不同的优缺点,如下所述:

SSE的优点:

  1. SSE是基于HTTP协议的,因此可以穿透大多数防火墙和代理服务器。
  2. SSE可以使用普通的HTTP服务器,无需额外的服务器软件。
  3. SSE是单向通信,只能由服务器向客户端发送数据,因此可以减少带宽和资源使用。
  4. SSE支持自定义事件和数据格式。

SSE的缺点:

  1. SSE只能使用长轮询或短轮询方式实现,因此无法实现真正的实时通信。
  2. SSE不支持双向通信,因此无法实现客户端向服务器发送数据。
  3. SSE在某些浏览器中可能存在兼容性问题。

Websocket的优点:

  1. Websocket是双向通信的,可以实现真正的实时通信。
  2. Websocket支持服务器向客户端和客户端向服务器发送数据。
  3. Websocket使用单个TCP连接,因此可以减少网络延迟和带宽使用。
  4. Websocket是一种标准化的协议,具有良好的跨平台和跨浏览器支持。

Websocket的缺点:

  1. Websocket需要额外的服务器软件支持,例如Socket.io等。
  2. Websocket的初始连接开销较大,需要经过握手过程。
  3. Websocket在某些防火墙和代理服务器中可能存在问题。

总结

ChatGPT 采用 Server-sent events(SSE)协议,是因为 SSE 提供了一种简单、可靠、高效的服务器推送技术,可以实现实时通信,而且不需要客户端发起请求,可以节省带宽和服务器资源。

SSE 是一种基于 HTTP 协议的服务器推送技术,它允许服务器向客户端发送单向的、实时的、持久的数据流,而客户端只需要通过一个简单的 EventSource 接口进行监听和处理即可。SSE 的优点在于它不需要客户端发起多余的请求,而是通过一个长连接,实现了服务器向客户端的数据推送,避免了频繁的 HTTP 请求,减少了网络延迟和带宽消耗,能够更好地适应实时通信的场景。

因此,ChatGPT 采用 SSE 协议,可以更加高效地推送消息,提高了实时性和用户体验。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-05-22,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Java面试教程 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 背景
  • 面试官: 最近ChatGPT很火,他以聊天的形式把答案推送给你,你知道服务器逐字主动推送怎么做的吗?
  • SSE协议
  • 代码实现
  • 对比Websocket
  • 总结
相关产品与服务
云服务器
云服务器(Cloud Virtual Machine,CVM)提供安全可靠的弹性计算服务。 您可以实时扩展或缩减计算资源,适应变化的业务需求,并只需按实际使用的资源计费。使用 CVM 可以极大降低您的软硬件采购成本,简化 IT 运维工作。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档