Semantic Chunker 语义分块
Window Size:
2
Threshold:
0.85
0. 待处理文本 (Raw Text)
可编辑 (Editable)
尝试修改文本内容,然后点击"下一步"
1. 正则分句结果 (Splitted Sentences)
窗口划分示意图 (Grouping Logic)
Stride = Window Size (无重叠)
2. 构建上下文窗口 (Windows)
语义连贯
语义断裂(切分点)
4. 最终分块结果 (Final Chunks)
3. 语义相似度曲线 (Cosine Similarity)
相似度
阈值线