HarderThenHarder/transformers_tasks

This is stars and forks stats for /HarderThenHarder/transformers_tasks repository. As of 27 Apr, 2024 this repository has 1534 stars and 301 forks.

该项目集成了基于 transformers 库实现的多种 NLP 任务。 huggingface transformers 是一个非常棒的开源框架，支持非常方便的加载/训练 transformer 模型，你可以在这里看到该库的安装方法和入门级调用，该库也能支持用户非常便捷的微调一个属于自己的模型。 在该项目中我们集成了一些主流的NLP任务，你可以找到对应的任务，将代码中的训练数据集更换成你自己任务下的数据集从而训练一个符合你自己任务下的模型。 目前已经实现的NLP任务如下（更新中）： 1. 文本匹配（Text Matching） 计算文本间的相似度，多用于：搜索召回、文本检索、蕴含识别 等任务。 模型 传送门 【监督】概览 [这里] 【监督】PointWise（单塔） [这里] 【监督】DSSM（双塔） [这里] 【监督】Sentence Bert（双塔） [这里] 【无监督】SimCSE [这里] 2. 信息抽取（Information Extraction） 在给定的文本段落中抽取目标信息，多用于：命名实体识别（NER），实体关系抽取（RE） 等任务。 模型 传送门 通用信息抽取（Universe...