Om

Ett nyhetssöknings-API för agenter och appar, med en gratisplan och fullständig artikeltext.

Problemet

En agent som behöver aktuell information behöver mer än rubriker. Den behöver själva artikeln, och den behöver veta vilka fält som observerades och vilka som gissades. De flesta nyhets-API:er säljer artikeltexten i ett betalläge och säger inget om var deras metadata kommer ifrån. Jämförelsen har detaljerna.

Vad vi byggde

Fulltextsökning över hundratusentals nyhetsartiklar per dag från 25,000+ utgivare i 90+ länder och 50+ språk, med ett löpande 90-dagar stort fönster som uppdateras kontinuerligt. Fyra GET-slutpunkter och en nyckel.

Hur det finansieras

Ärligt talat: det kostar nästan ingenting.

Data hämtas från stora offentliga nyhetsarkiv – massiva dataset med redan crawlad nyhetswebbsidor, släppta kontinuerligt. Vi licensierar inte innehåll från utgivare och vi hämtar inte sidor från deras servrar; vi bearbetar dataset som redan är offentliga.

Nittio dagars data, indexerat och replikerat tre gånger, upptar cirka 3% av ett Elasticsearch-cluster som vi redan kör för annat arbete. Att svara på en sökning kostar CPU-tid som vi har över. Mätt kapacitet är 1,247 förfrågningar per sekund; en enskild anropare är begränsad till 20.

Kommer det att förbli gratis

Gratisplanen består. Vi lovade tidigare att sökningen skulle vara öppen utan nyckel; det upphörde i 2026, och ändringsloggen förklarar varför. Alla ytterligare ändringar meddelas där innan de sker.

Vem driver det

Ett litet oberoende team som driver söknings- och datainfrastruktur — Elasticsearch-cluster, crawlers och pipelines — som sin dagliga verksamhet. Denna tjänst körs på samma infrastruktur, vilket är precis varför den kan ges bort.

Kontakt

• Utgivare som vill bli uteslutna: se utgivare. Förfrågningar beaktas, inga diskussioner.
• Större datamängder: om du planerar tiotusentals förfrågningar, hör av dig i förväg — det finns ett bättre sätt att leverera datan än via HTTP.
• Bugs och felaktig data: berätta vilken artikel det gäller och vad som är fel. Felaktiga etiketter för land eller datum är vanligast och mest värdefulla att få veta om.

E-posta [email protected].

Vad vi inte gör

• Vi hostar inte artikelinnehåll. Varje svar innehåller den ursprungliga url – ange källa och länka tillbaka till den.
• Vi säljer inte dina data eller kör annonser. Se integritet.
• Vi rangordnar inte utgivare efter trovärdighet eller tillämpar ett politiskt filter. Det som Common Crawl nådde är det du får, och det har konsekvenser.