当前位置:首页 > 技术分析 > 正文内容

打造本地RAG知识库(八):AnythingLLM+Xinference的搭建和分享方法

ruisui884个月前 (02-28)技术分析15

大家好,我是寒山。

最近很多网友问AnythingLLM搭建的知识库如何分享给身边的朋友使用?今天我们就来给大家详细的讲解一下。

关于本地知识库的内容我们前面已经讲了很多了,今天就不细说了,主要是给大家说一下怎么安装使用。

实现方式:

  1. 使用Docker安装AnythingLLM。
  2. Xinference安装使用。
  3. 知识库的添加和演示

使用Docker安装AnythingLLM

只有Docker版本可以分享,桌面版是单人使用的,无法分享,所以我们要安装Docker版。

  • 拉取Docker镜像
docker pull mintplexlabs/anythingllm
  • 启动Docker镜像

由于3001已经被我们之前的OneApi占用了,这么这里使用3010代替3001.

export STORAGE_LOCATION=$HOME/anythingllm && \
mkdir -p $STORAGE_LOCATION && \
touch "$STORAGE_LOCATION/.env" && \
docker run -d -p 3010:3001 \
--cap-add SYS_ADMIN \
-v ${STORAGE_LOCATION}:/app/server/storage \
-v ${STORAGE_LOCATION}/.env:/app/server/.env \
-e STORAGE_DIR="/app/server/storage" \
mintplexlabs/anythingllm
  • 启动AnythingLLM后的Docker界面
  • 打开网页http://localhost:3010

这样我们Docker版的AnythingLLM就安装完成了。

Xinference安装使用

在开始之前,请确保已经按照上一个文章进行了安装和配置,【DeepSeek打造本地RAG知识库(五):FastGPT + Xinference超详细教程】

使用下面的启动命令,启动Xinference。

 sudo XINFERENCE_MODEL_SRC=modelscope xinference-local --host 0.0.0.0 --port 9997

然后打开web网页:http://localhost:9997/

分别启动我们的语言模型和向量模型

知识库的添加

直接把我们的成绩单,添加到本地知识库,向量化一下,就可以了,如下图:

演示的结果:

分享演示

创建用户,如果想分享给谁,需要给他创建一个用户。

分享地址:

http://localhost:3010/workspace/cd8f0f3f-8f41-48cb-b251-f649c377d715

把这localhost换成自己的本机IP,或者映射过的公网IP都可以。

用户登录,使用前面创建的用户名。

登录后就可以正常使用了,好了,今天的分享就到这里。

记得分享、关注,有问题留言给我,有时间都会给大家整理成文档和视频分享出来。

扫描二维码推送至手机访问。

版权声明:本文由ruisui88发布,如需转载请注明出处。

本文链接:http://www.ruisui88.com/post/2333.html

标签: docker plex
分享给朋友:

“打造本地RAG知识库(八):AnythingLLM+Xinference的搭建和分享方法” 的相关文章

机动车检测站收费管理系统

机动车检测站收费管理系统headerfooter《机动车检测站收费管理系统》是一款适用于中小型机动车检测站收费管理、打印票据。主要包括收费打印、统计查询、辅助字典等功能。本管理系统多处具有快速辅助录入功能,操作简单,易学、易用;处理功能高效强大,是协助您的好帮手!主要功能:1.收费管理:收费打印、今...

国产操作系统上Vim的详解03--安装和使用插件 | 统信 | 麒麟 | 中科方德

原文链接:国产操作系统上Vim的详解03--使用Vundle插件管理器来安装和使用插件 | 统信 | 麒麟 | 中科方德Hello,大家好啊!今天给大家带来一篇在国产操作系统上使用Vundle插件管理器来安装和使用Vim插件的详解文章。Vundle是Vim的一款强大的插件管理器,可以帮助我们轻松地安...

「干货」FPGA设计中深度约束技巧及调试经验总结

今天跟大家分享的内容很重要,也是我们调试FPGA经验的总结。随着FPGA对时序和性能的要求越来越高,高频率、大位宽的设计越来越多。在调试这些FPGA样机时,需要从写代码时就要小心谨慎,否则写出来的代码可能无法满足时序要求。另外,最近跟网友聊天时,有谈到公众号寿命的问题,我觉得网络交换FPGA公众号应...

「干货」Vue+Element前端导入导出Excel

作者:xrkffgg转发链接:https://segmentfault.com/a/11900000189936191 前言1.1 业务场景由前台导入Excel表格,获取批量数据。根据一个数组导出Excel表格。2 实现原理2.1 引入工具库file-saver、xlsx、script-loader...

精品微信小程序在线考试系统+后台管理系统|前后...

《微信小程序在线考试系统+后台管理系统|前后分离VUE》该项目含有源码、论文等资料、配套开发软件、软件安装教程、项目发布教程等本系统包含微信小程序前台和Java做的后台管理系统,该后台采用前后台前后分离的形式使用Java+VUE微信小程序——前台涉及技术:WXML 和 WXSS、JavaScript...

html5迁移到微信小程序的 方法 亲测可用

切图网习惯于在做小程序之前先做成html5+vuejs的形式,因为html5切图是我们比较熟悉的方式,而且有专业的工具 以及浏览器调试也会更加的方便 灵活,效率高,而且html5的方式可以方便预览看效果,方便调整,当html5页面做好确认没问题以后 再转成小程序或者官方出品wepy的方式,这个时候就...