npub195…pwpxu on Nostr: #V2EX ### [问与答] 大模型对长文本的处理都是会分段的吗？ ...
Published at
2026-03-16 14:58:06 UTCEvent JSON
{
"id": "363eb9b1a9f8da17d3e0554c97f3fee32ff5c888f0ed6e513ed433d80f9e563f",
"pubkey": "2d0154e14033e848b448a971322bfbf4e04a29c377012ee0f5ab66099b56f1ad",
"created_at": 1773673086,
"kind": 1,
"tags": [
[
"t",
"v2ex"
]
],
"content": "#V2EX\n### [问与答] 大模型对长文本的处理都是会分段的吗？\n\n最近在折腾一个对超长文本的 AI 总结，要求对目标信息进行提取然后归一化，但是输出的结果总是存在重复，严重怀疑是分段分别处理后归一化，然后没有整体归一化导致出现这种情况 \n \n或者说这本来就是大模型不擅长的领域？\nhttps://www.v2ex.com/t/1198781#reply0",
"sig": "a9fb63aeca861cccaf8146c968b0d7670f07249a6be37f7f0e91920f88e0a58e6c0fc7a1f8f03ff6d0a362a6dba06115c8cd3bf0de70607192340227ce96167f"
}