robotstxt 的反向依赖以下 Gem 的最新版本需要 robotstxt

hostelify 0.8.4

scrapper for publicly accessible data from hostelworld hostelbookers etc.

122,341 下载

site_analyzer 0.3.17

Create site report for SEO many options.

47,231 下载

rwspider 0.4.3

RW Spider is an multithreading spider client written in Ruby designed to make easy th...

8,773 下载

下载总量 33,144

这个版本 18,058

版本发布:
February 13, 2010 8:43pm

许可:
无

需要的 Ruby 版本: 无

需要的 RubyGems 版本: >= 1.2

链接:

主页源代码下载审查变更徽章 RSS Analytics 举报投诉反向依赖