Arxiv
arXiv 是一个开放获取的存档,包含物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学领域的200万篇学术文章。
安装与设置
首先,你需要安装 arxiv
python 包。
pip install arxiv
其次,您需要安装PyMuPDF
Python包,该包将从arxiv.org
网站下载的PDF文件转换为文本格式。
pip install pymupdf
文档加载器
查看使用示例。
from langchain_community.document_loaders import ArxivLoader
API Reference:ArxivLoader
检索器
查看使用示例。
from langchain_community.retrievers import ArxivRetriever
API Reference:ArxivRetriever