Add fastCRW (open-source alternative to Firecrawl and Tavily)
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 1/5
- Thời gian dự kiến
- Dưới một giờ
- Mức phù hợp với người mới
- 68/100
Hướng nghiên cứu
Xem lại các mục hiện có trong repository opensource.builders và làm theo định dạng đóng góp của chúng; issue không nêu file hoặc test cụ thể nào. Xác minh repository, website, giấy phép và các khả năng được liệt kê của fastCRW, sau đó thêm công cụ này với các liên kết và metadata chính xác để nó xuất hiện như một lựa chọn thay thế mã nguồn mở cho Firecrawl và Tavily.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Add open source tool: fastCRW
- Repository: https://github.com/us/crw
- Website: https://fastcrw.com
- Description: Open-source web scraping, crawling, AI search, and data extraction API in a single 8 MB Rust binary. Firecrawl-compatible /v1 endpoint and Tavily-compatible search responses. 710 ms p50 on a 1,000-URL benchmark, 6.6 MB idle RAM.
- Category: API Development
- Features: Self-hosted option, API integration, Markdown support, Plugin system, Data export
Open source alternative to
- Firecrawl - https://firecrawl.dev
- Tavily - https://tavily.com
Additional info
- License: AGPL-3.0
- Primary language: Rust
- Endpoints: scrape, crawl, search, extract, map (Firecrawl /v1 compatible)
- Search response format: Tavily-compatible
- Free tier: 500 credits/month on managed cloud
- Self-host: AGPL-3.0, single 8 MB Docker image
- SDKs: Python, Node.js, CLI
- Integrations: LangChain, LlamaIndex, CrewAI, n8n, Dify
- Distribution: Homebrew, apt, Docker
Benchmark
On a public 1,000-URL benchmark fastCRW posts 710 ms p50 and 833 ms average per URL, runs in 6.6 MB idle RAM, and ships as an 8 MB Docker image.
- Ngôn ngữ chính
- TypeScript
- Star
- 1.3k
- Fork
- 195
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của junaid33/opensource.builders
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
junaid33/opensource.builders#596 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
junaid33/opensource.builders#594 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 65/100
junaid33/opensource.builders#593 ·
-
Add open source tool: PlainsayĐang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 67/100
junaid33/opensource.builders#592 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
junaid33/opensource.builders#591 ·
Tất cả issue của junaid33/opensource.builders
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 85/100
Slaymish/HealthAgent#7 ·
-
area: engine topic: math type: bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 80/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Get-Concord-AI/concord-mcp#310 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Correct install_claude: 'marketplace add' over a different source is refused, not replaced in placeĐang mởtype:bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 80/100
nightgauge/nightgauge#2804 ·
Maintainer thường phản hồi trong vòng 1 ngày