wiseflow

Scrapy是一个快速、高级的Python网页爬取和抓取框架。

开箱即用的OCR，支持80多种语言和所有流行的文字系统，包括拉丁文、中文、阿拉伯文、天城文、西里尔文等等。

Go语言优雅的爬虫框架

一个AI编排框架，用于构建可定制、可用于生产环境的大型语言模型(LLM)应用。它能够将组件（模型、向量数据库、文件转换器）连接到管道或代理，从而与您的数据进行交互。借助先进的检索方法，它最适合构建基于检索的增强生成(RAG)系统、问答系统、语义搜索或对话式智能体聊天机器人。

Crawlee 是一个基于 Node.js 的网页抓取和浏览器自动化库，用于构建可靠的爬虫程序。它支持 JavaScript 和 TypeScript，可以提取数据用于 AI、大型语言模型 (LLM)、检索增强生成 (RAG) 或 GPT 等应用。它能够下载网站上的 HTML、PDF、JPG、PNG 等各种类型的文件。兼容 Puppeteer、Playwright、Cheerio、JSDOM 和原生 HTTP 请求。支持有头和无头模式，并提供代理轮换功能。

DocsGPT是一个开源的生成式AI工具，它帮助用户从知识来源获取可靠的答案，同时避免出现幻觉（即AI模型产生虚假信息）。它支持私密可靠的信息检索，并内置了工具和自主系统功能。

A Python library for extracting structured information from unstructured text using LLMs with precise source grounding and interactive visualization.

团队专属的生成式 AI 聊天机器人——想象一下，如果 ChatGPT 能访问你团队独有的知识库，它会是什么样子。

Weaviate是一个开源的向量数据库，它既存储对象也存储向量，允许将向量搜索与结构化过滤相结合，并具备云原生数据库的容错性和可扩展性。

创意编码：生成艺术、数据可视化、交互设计及相关资源