上一篇
PyVideoTrans是什么？一文让你看懂PyVideoTrans的技术原理、主要功能、应用场景
LongCite是什么？一文让你看懂LongCite的技术原理、主要功能、应用场景
来源：卓商AI
发布时间：2025-04-05
LongCite概述简介
LongCite是由清华大学推出的项目，旨在提升大型语言大模型（LLMs）在长文本问答任务中的可信度和可验证性。项目通过生成细粒度的句子级引用，使用户能验证模型的回答是否准确。核心组成部分包括LongBench-Cite评估基准、CoF自动化数据构建流程、LongCite-45k数据集，以及基于该数据集训练的LongCite-8B和LongCite-9B模型。模型能理解长文本内容并提供准确的问答服务，同时附上直接查阅的文本引用，增强信息的透明度和可靠性。
LongCite的功能特色
生成细粒度引用：LongCite使语言大模型在回答长文本问题时，生成精确到句子级别的引用，用户能直接追溯到原文中的具体信息。
提高回答的忠实度：LongCite有助于确保模型的回答更加忠实于原文，减少模型出现的“幻觉”（即生成与原文不符的信息）。
增强可验证性：用户基于模型提供的细粒度引用来验证回答的真实性和准确性，提高模型输出的可信度。
自动化数据构建：LongCite采用了CoF（Coarse to Fine）流程，自动化地生成带有细粒度引用的高质量长文本问答数据，为模型训练提供丰富的标注资源。
评测基准：LongCite引入LongBench-Cite评测基准，用于衡量模型在长文本问答中生成引用的能力，包括正确性和引用质量。
LongCite的技术原理
长文本处理能力：LongCite支持超长上下文窗口的大型语言大模型（如GLM-4-9B-1M，Gemini 1.5等），能处理和理解长达数万字的文本。
细粒度引用生成：LongCite训练模型生成精确到句子级别的引用，使每个回答都能追溯到原文的具体句子，提高了回答的可验证性。
自动化数据构建流程（CoF）：使用自指导（Self-Instruct）方法自动从长文本中生成问题和答案对。从长文本中检索与答案相关的句子块，并生成块级引用。在块级引用的基础上，提取出支持每个陈述的具体句子，生成句子级引用。
监督式微调（Supervised Fine-Tuning, SFT）：CoF流程生成的带有细粒度引用的高质量数据集对大型语言大模型进行微调，提升模型在长文本问答任务中的表现。
LongCite项目介绍
GitHub仓库：https://github.com/THUDM/LongCite
HuggingFace模型库：https://huggingface.co/THUDM
arXiv技术论文：https://arxiv.org/pdf/2409.02897
LongCite能做什么？
学术研究：开发人员和学者用LongCite来查询大量的文献资料，并获取带有引用的详细答案，支持研究工作。
法律咨询：法律专业人士用LongCite分析法律文档，获取具体的法律条文或案例引用，支持法律分析和案件研究。
金融分析：金融分析师和投资者使用LongCite来理解复杂的金融报告和市场研究，获取关键数据和趋势的准确引用。
医疗咨询：医疗专业人员依赖LongCite来查询医疗文献，获取基于最新研究成果的诊断和治疗建议的引用。
新闻报道：记者和新闻机构用LongCite验证报道中的信息，确保发布的新闻内容准确无误，并提供可靠的来源引用。
© 版权声明:本站所有原创文章版权均归卓商AI工具集及原创作者所有，未经允许任何个人、媒体、网站不得转载或以其他方式抄袭本站任何文章。
相关文章
-
CHANGER是什么？一文让你看懂CHANGER的技术原理、主要功能、应用场景2025-04-05 -
Kiroku是什么？一文让你看懂Kiroku的技术原理、主要功能、应用场景2025-04-05
-
Vision Search Assistant是什么？一文让你看懂Vision Search Assistant的技术原理、主要功能、应用场景2025-04-05
-
MVDrag3D是什么？一文让你看懂MVDrag3D的技术原理、主要功能、应用场景2025-04-05
-
Chonkie是什么？一文让你看懂Chonkie的技术原理、主要功能、应用场景2025-04-05
-
MSQA是什么？一文让你看懂MSQA的技术原理、主要功能、应用场景2025-04-05
卓商AI
AI爱好者的一站式人工智能AI工具箱，累计收录全球10,000⁺好用的AI工具软件和网站，方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用，力争做全球排名前三的AI网址导航网站，欢迎您成为我们的一员。
最新发布
1
2
3
4
5
6
7
8
9
10
猜你喜欢
Endurance
Endurance是一款为企业和团队提供自适应训练和个人辅导的产品。通过结构化的训练计划、学习资源、恢复追踪、团队训练和赛事目标等功能，帮助员工提高生...
anto
anto 是一款针对 Windows 的字幕文件 (srt) 翻译工具，提供便捷的翻译功能，旨在提高字幕翻译效率。...
Luna.ai
Luna.ai是一款革命性的潜在客户挖掘工具，通过提供高度个性化的邮件建议，帮助您快速找到潜在客户并与其互动。不需要繁琐的挖掘过程，不需要花费大量时间...
GetSearchablePDF
GetSearchablePDF是一款在线工具，可以将PDF文档转换为可搜索的PDF。它使用先进的OCR技术，可以在几秒钟内识别文本，并将其转换为可搜...
Voz AI Note Taker
Voz AI Note Taker是一个利用人工智能技术自动记录、转录和总结讲座、通话和视频内容的生产力工具。它通过自动化的方式生成结构化笔记，帮助用...
formwise
formwise可让您在几分钟内创建白色标签AI工具而无需编码。有成千上万的企业家已经使用了该平台，可以探索数百个用例，并将您喜欢的ChatGpt提示...
墨刀 AI
墨刀 AI是一款免费使用的产品设计协作平台，提供高保真交互原型设计、团队协作、海量素材等功能，适用于多种工作场景。墨刀 AI可以快速完成全流程产品设计...
ModelLe AI Game
ModelLe AI Games是一个基于AI大语言模型的对话谜题游戏。它通过与AI模型进行对话来解决谜题。玩家需要根据问题的要求构造合适的问题，并根...
AI爱好者的一站式人工智能AI工具箱，累计收录全球10,000⁺好用的AI工具软件和网站，方便您更便捷的探索前沿的AI技术。本站持续更新好的AI应用，力争做全球排名前三的AI网址导航网站，欢迎您成为我们的一员。
