Jag håller på att bygga ett verktyg där en av funktionerna är att kolla hur många sidor en domän har registrerade hos google(site:domain.com mao).
Just nu kör jag en väldigt ful scrapping lösning. Jag är inte speciellt sugen på en katt och råtta-lek med google genom slumpade ip-nummer, proxys, osv. Så till min fråga:
Vad jag har förstått har inte Google någon API för att få informationen jag söker(indexerade sidor ~ site:domain.com)? Om så är fallet, finns det någon pålitlig extern leverantör som scrappar google och erbjuder ett stabilt API till ett rimligt pris?
Har ingen koll och har spenderat några timmar att försöka få fram ett bra alternativ, har iof ett gammalt Google SOAP Search API nummer som jag har hört ska fungera fortfarande men vill inte slösa detta på en klient som betalar på tok för lite...