[pontus]

Jag håller på att bygga ett verktyg där en av funktionerna är att kolla hur många sidor en domän har registrerade hos google(site:domain.com mao).

Just nu kör jag en väldigt ful scrapping lösning. Jag är inte speciellt sugen på en katt och råtta-lek med google genom slumpade ip-nummer, proxys, osv. Så till min fråga:

Vad jag har förstått har inte Google någon API för att få informationen jag söker(indexerade sidor ~ site:domain.com)? Om så är fallet, finns det någon pålitlig extern leverantör som scrappar google och erbjuder ett stabilt API till ett rimligt pris?

Har ingen koll och har spenderat några timmar att försöka få fram ett bra alternativ, har iof ett gammalt Google SOAP Search API nummer som jag har hört ska fungera fortfarande men vill inte slösa detta på en klient som betalar på tok för lite...

[Jine]

Google har mängder med API:er, bla deras Custom Search API:
http://code.google.com/intl/sv/apis/.../overview.html

Gratis för användning i liten skala, och kostnad för högre volymer.
Resultat i JSON eller Atom/XML.

Kodexempel finns på http://code.google.com/intl/sv/apis/...libraries.html

EDIT: Overview av övriga API:er finns på http://code.google.com/intl/sv/more/

[Bjorne]

Googles AJAX sök api är medvetet sabbat just för att det ska bli extra knepigt att bygga den typen av tjänster som du vill skapa. Resultaten man får tillbaka är inte alls samma som man får när man söker på google.com, pga att sökindexet är mycket mindre. Förr i tiden hade google ett fungerande sökapi men de bytte ut det mot det nuvarande, trasiga api:et.