Про нас
API пошуку новин для агентів та додатків із безкоштовним тарифом та повним текстом статей.
Проблема
Агенту, якому потрібна актуальна інформація, потрібно більше, ніж просто заголовки. Йому потрібен сам текст статті, а також знання, які поля зафіксовано, а які вгадано. Більшість новинних API продають повний текст у платному тарифі й не повідомляють, звідки взялися їхні метадані. Порівняння містить подробиці.
Що ми побудували
Повнотекстовий пошук серед сотень тисяч новинних статей щодня від 25,000+ видавців у 90+ країнах та 50+ мовами, у межах рухомого 90-денного вікна, що оновлюється безперервно. Чотири GET-ендпоінти та один ключ.
Хто за це платить
Чесно: це майже нічого не коштує.
Дані надходять з великомасштабних публічних новинних архівів — масивних наборів даних із вже проіндексованими новинними сторінками, які оновлюються безперервно. Ми не ліцензуємо контент у видавців і не зчитуємо сторінки безпосередньо з їхніх серверів; ми обробляємо набори даних, які вже є публічними.
Дев'яносто днів даних, індексованих і реплікованих тричі, займають приблизно 3% кластера Elasticsearch, який ми вже використовуємо для інших завдань. Обслуговування запиту пошуку коштує часу процесора, який у нас є в резерві. Виміряна пропускна здатність становить 1,247 запитів на секунду; один клієнт обмежений 20.
Чи залишиться він безкоштовним
Безкоштовний план залишається незмінним. Раніше ми обіцяли, що пошук буде доступним без ключа; це припинилося в 2026, і про це написано в журналі змін. Будь-які подальші зміни спочатку анонсуються там.
Хто за цим стоїть
Невелика незалежна команда, яка професійно обслуговує інфраструктуру пошуку та даних — кластери Elasticsearch, краулери та конвеєри даних. Цей сервіс працює на тій самій інфраструктурі, саме тому його можна віддавати безкоштовно.
Контакти
- Видавці, які хочуть виключити свої видання: див. видавці. Такі запити виконуємо без суперечок.
- Пакетні дані: якщо ви плануєте здійснити десятки тисяч запитів, зв'яжіться з нами заздалегідь — існує кращий спосіб надати вам дані, ніж через HTTP.
- Баги та помилкові дані: повідомте нам, яка саме стаття і що в ній не так. Найпоширеніші та найкорисніші для нас — це помилкові мітки країни або дати.
Напишіть на [email protected].
Чого ми не робимо
- Ми не зберігаємо контент статей. Кожна відповідь містить оригінальний
url— обов'язково вказуйте посилання на джерело. - Ми не продаємо ваші дані і не показуємо рекламу. Дивіться політику конфіденційності.
- Ми не ранжуємо видавців за надійністю і не застосовуємо політичний фільтр. Ви отримуєте те, що знайшов Common Crawl, і це має свої наслідки.