读破万卷,神交古人,突破 ChatGPT4096 的 Token 限制,llama_index 建立自己的垂直领域资料人工智能助理

刘悦 at 
ChatGPT 的泛用性极高,上知天文,下通地理,参考古今,博稽中外,几乎无所不知,无所不晓。但如果涉及垂直领域的专业知识点,ChatGPT 难免也会有语焉不详,闪烁其词的毛病,本次我们将特定领域的学习材料“喂”给 ChatGPT,让它“学习”后再来回答专业问题。专业领域语料问题所谓专业领域语料问题,可以理解为特定范围内的知识图谱,也就是给 GPT 提供前置的检索维度,举个例子,大家都读过鲁迅的名篇《从百草园到三味书屋》,文章中涉及一个“美女蛇”的典故,假设我们没有给 GPT 设置一个特定范围,直接问“美女蛇”的相关问题:一望而知,ChatGPT 对于“美女蛇”典故的理解出现了信息偏差问题,它……