成为赞助商——支持中文 Agent 生态

了解赞助
库Agent场景库
← 返回用例列表

用自然语言查询 HN/arXiv/LessWrong 大规模语料

对 HN、arXiv、LessWrong 等本地或镜像语料用自然语言提问,快速检索论点、出处与相关讨论。

来源:Hacker News ↗
KimiDeepSeekClaudeChatGPT⚡ 效率办公📚 学习教育

场景说明

研究与自学常卡在「知道大概在哪、却翻不动海量帖与论文」。Agent 对接已索引的公开语料(或自建检索层),用自然语言返回带出处的摘要与链接。适合文献调研与观点溯源。只读公开数据;不绕过站点条款批量抓取;不伪造引用。

案例叙事

01他们做了什么

Hacker News Show HN(item 46442245,作者 Xyra)介绍把一段含只读 API 密钥的提示词贴进 Claude Code,即可对作者托管的公开只读 SQL+向量库提问:覆盖 Hacker News、arXiv、LessWrong 等公开语料;由模型生成在其机器上安全执行的 SQL,返回答案,并带 Alerts——把查询登记为告警,条件满足或结果变化时发邮件。帖中自述嵌入规模约为 posts 1.4M/4.6M、comments 15.6M/38M(Voyage-3.5-lite),标题称约 600 GB 索引;亦提到组合式向量检索写法。公开帖未给出检索精确率、召回或幻觉引用率等量化。

国内落地选定已授权索引或本地检索层,用自然语言提问并强制「带出处片段+链接」;问题尽量加时间范围与领域词。结果先写入飞书/企微调研笔记,人点开原文核对后再引用。硬约束:只读公开数据,不绕过站点条款批量抓取,不伪造引用;密钥与配额放隔离账号,讨论群勿贴可写密钥。

02实际效果

  • 源未披露检索精确率、召回、幻觉引用率或人审驳回率等量化;公开帖侧重「自然语言→只读 SQL/向量库→带出处回答/告警」能力描述。
  • 作者自述:可用 Claude Code 对接约 600 GB 级公开索引(HN/arXiv/LessWrong 等),帖中给出 posts/comments 嵌入规模数量级,并支持把查询登记为邮件 Alerts(帖文陈述,非我方实测)。
  • 研究笔记从「手工翻帖」变成可溯源的问答草稿;是否写入正式报告仍由人核对原文后决定。

03值得知道

  • 公开源未给出可复用的检索质量基线,上线后需用自有金标问题集复盘,勿把「能跑通查询」当成引用正确承诺。
  • 硬约束:只读公开语料;禁止绕过站点条款抓取;重要结论必须点开原文;禁止伪造 DOI/链接。
  • 嵌入 API 与只读库配额要隔离;飞书/企微笔记勿粘贴可写密钥;组合检索提示词过宽时易跑偏,需加时间与领域约束。

04可复制提示词

带出处的语料问答草案

你是公开语料检索助手。只根据给定检索片段作答,每条论点必须带出处(来源名、标题/ID、链接或定位信息)。禁止编造未出现在片段里的论文或评论;不确定标「待核对原文」。

输出 Markdown:
## 直答(≤120 字)
## 论据列表(论点 / 出处 / 原文摘录≤40 字)
## 冲突观点(若有)
## 需人点开原文核对的项
## 非目标(不批量抓取、不改索引、不伪造引用)

问题与片段:
{{question_and_hits}}

调研笔记飞书卡片

把带出处的问答压成可贴飞书/企微的调研笔记(≤180 字):问题、三条最相关出处、一句谨慎结论。结尾写「待人核对原文,未定稿」。不要添加未提供的引用或下载量。

问答草案:
{{qa_draft}}

怎么做

  1. 选定已授权的语料索引或本地检索层
  2. 用自然语言提问,Agent 返回带出处的片段与链接
  3. 人核对引用后再写入笔记或报告

实用提示

  • 问题尽量带时间范围与领域词,减少跑偏
  • 重要结论必须点开原文核对,勿只信摘要
#语料检索#自然语言查询#arXiv#Hacker News#研究