EduNLP
latest
Introduction
Welcome to EduNLP’s Tutorials and Documentation
Tutorial
Get Started
Standard Item Format
Syntax Parsing
Component Segmentation
Tokenization
Pre-training
Vectorization
用户指南
入门
标准项目格式
语法解析
成分分解
令牌化
预训练
向量化
API Reference
EduNLP.SIF
EduNLP.utils
EduNLP.Formula
EduNLP.Tokenizer
EduNLP.Pretrain
EduNLP.ModelZoo
EduNLP.I2V
EduNLP.Vector
EduNLP
»
分句
Edit on GitHub
分句
¶
将较长的文档切分成若干句子的过程称为“分句”。每个句子为一个“令牌”(token)(待实现)。