arachnid 0.3.2

Arachnid is a web crawler that relies on Bloom Filters to efficiently store visited urls and Typhoeus to avoid the overhead of Mechanize when crawling every page on a domain.

Gemfile:
=

instalar:
=

Versões:

0.4.1 January 17, 2014 (5 KB)
0.4.0 January 16, 2014 (4,5 KB)
0.3.2 January 16, 2014 (5 KB)
0.3.1 January 16, 2014 (5 KB)
0.3.0 January 16, 2014 (4,5 KB)

Mostrar todas as versões (12)

Runtime Dependencies (4):

bloomfilter-rb = 2.1.1

domainatrix = 0.0.10

nokogiri = 1.5.0

typhoeus = 0.3.2

Mostrar todas as dependências

Donos:

Autores:

dchuk

arachnid 0.3.2

Gemfile:
=

instalar:
=

Versões:

Runtime Dependencies (4):

Donos:

Autores:

SHA 256 checksum:

Total de downloads 50.059

Desta versão 3.456

Versão lançada:
January 16, 2014 9:16pm

Licenças:
N/A

Versão Requerida do Ruby: Nenhum

Links:

arachnid 0.3.2

Gemfile: =

instalar: =

Versões:

Runtime Dependencies (4):

Donos:

Autores:

SHA 256 checksum:

Total de downloads 50.059

Desta versão 3.456

Versão lançada: January 16, 2014 9:16pm

Licenças: N/A

Versão Requerida do Ruby: Nenhum

Links:

Gemfile:
=

instalar:
=

Versão lançada:
January 16, 2014 9:16pm

Licenças:
N/A