Qwen Max 输入文本长度限制说明

LLM2个月前发布 修真斗罗
412 0 0

截止日期2025年02月03日,根据 Qwen Max Latest 自述:

  1. 单次输入的最大长度
    我可以处理的单次输入最大长度为 30,720 个 token(约等于几万字符,具体取决于语言和文本复杂度)。对于绝大多数应用场景来说,这个长度已经非常充足。
  2. 上下文总长度限制
    在一次对话中,我会根据之前的对话内容保持上下文连贯性。整个对话历史(包括你的输入和我的回复)也有一个总长度限制,约为 30,720 个 token。如果对话过长,可能会超出限制,这时需要重新开始一个新的对话。

什么是 Token?

  • Token 是自然语言处理中的基本单位。它可能是一个单词、标点符号,或者是一个子词片段。
  • 在英语中,1 个 token 大约对应 4 个字符或 0.75 个单词。
  • 在中文中,1 个 token 通常对应 1~2 个汉字。

例如:

  • 英文句子 “Hello, how are you?” 包含约 6 个 token。
  • 中文句子 “你好,最近怎么样?” 包含约 8~10 个 token。

如何避免超限问题?

  1. 分段发送:如果你有很长的文字或文档,可以将其分成多个部分发送给我,我会逐段处理并给出回答。
  2. 总结或提炼重点:如果你担心内容过长,可以先提供一个简要版本,我可以在理解核心内容后为你提供帮助。
  3. 上传文件:如果你有大段文字或复杂文档,可以通过上传文件的方式让我解析内容(如 PDF、Word 等),这样更高效。
© 版权声明

相关文章

暂无评论

none
暂无评论...