Markdown Scraper 相关的热门 GitHub AI项目仓库

将整个网站转换为 LLM 可用的 Markdown 或结构化数据。只需一个 API 即可抓取、爬取和提取数据。

Turn any PDF or image document into structured data for your AI. A powerful, lightweight OCR toolkit that bridges the gap between images/PDFs and LLMs. Supports 80+ languages.

Crawlee 是一个基于 Node.js 的网页抓取和浏览器自动化库，用于构建可靠的爬虫程序。它支持 JavaScript 和 TypeScript，可以提取数据用于 AI、大型语言模型 (LLM)、检索增强生成 (RAG) 或 GPT 等应用。它能够下载网站上的 HTML、PDF、JPG、PNG 等各种类型的文件。兼容 Puppeteer、Playwright、Cheerio、JSDOM 和原生 HTTP 请求。支持有头和无头模式，并提供代理轮换功能。

一款帮你记录和写作的智能笔记应用，支持多种设备。

? Markdown with superpowers — from ideas to papers, presentations and books.

每天利用大型语言模型从海量信息和各种来源中挖掘你感兴趣的内容。

一款高度可扩展的 Markdown 编辑器，具有版本控制、AI 辅助编程、思维导图、文档加密、代码片段运行、集成终端、图表嵌入、HTML 小程序、Reveal.js 演示文稿、插件和宏替换等功能。

利用大型语言模型将任何网页转换成结构化数据

基于飞桨的集大成式开发工具

一个由社区驱动，基于ChatGPT的阅读和与AI机器人聊天的方式

Backlog.md - A tool for managing project collaboration between humans and AI Agents in a git ecosystem

A drop-in replacement for react-markdown, designed for AI-powered streaming.

利用最先进的现代光学字符识别 (OCR) 技术和 Ollama 支持的模型，提供文档（PDF、Word、PPTX 等）提取和解析 API。 该 API 可对文档进行匿名化处理，移除个人身份信息 (PII)，并将任何文档或图片转换为结构化的 JSON 或 Markdown 格式。

一款由人工智能驱动的README文件生成器。

一个开源的 Python3 工具，使用小型模型识别图像中的布局、表格、数学公式（LaTeX）和文本，并将它们转换成 Markdown 格式。它是 Mathpix 的免费替代品，可以无缝地将视觉内容转换为文本表示。支持 80 多种语言。

AnyCrawl ?: A Node.js/TypeScript crawler that turns websites into LLM-ready data and extracts structured SERP results from Google/Bing/Baidu/etc. Native multi-threading for bulk processing.

Easily collect responses from ChatGPT scraper by providing a prompt along with valid Web Scraper API credentials.

Basic Memory是一个知识管理系统，它允许你通过与AI助手对话来构建持久性的语义图谱。所有知识都存储在你电脑上的标准Markdown文件中，让你完全控制和拥有你的数据。它可以直接与Obsidian.md集成。

Oxylabs AI Studio python SDK

导出并分享你的 ChatGPT 聊天记录