সম্পর্কে
এজেন্ট এবং অ্যাপগুলোর জন্য একটি নিউজ সার্চ API, যার একটি ফ্রি প্ল্যান এবং সম্পূর্ণ আর্টিকেল টেক্সট রয়েছে।
সমস্যা
একটি এজেন্টের যদি বর্তমান তথ্যের প্রয়োজন হয় তবে শুধুমাত্র হেডলাইন যথেষ্ট নয়। তাকে সম্পূর্ণ আর্টিকেলটি প্রয়োজন, এবং তাকে জানতে হবে কোন ফিল্ডগুলো পর্যবেক্ষণ করা হয়েছে এবং কোনগুলো অনুমান করা হয়েছে। বেশিরভাগ নিউজ API শরীরের অংশটি পেইড টায়ারে বিক্রি করে এবং তাদের মেটাডেটা কোথা থেকে এসেছে তা সম্পর্কে কিছুই বলে না। তুলনা বিস্তারিত বিবরণ দেয়।
আমরা কী বানিয়েছি
25,000+ প্রকাশকের কাছ থেকে 90+ দেশ এবং 50+ ভাষায় দৈনিক লক্ষ লক্ষ নিউজ আর্টিকেলের উপর ফুল-টেক্সট সার্চ, একটি রোলিং 90-দিনের উইন্ডোতে, নিরंतर আপডেট করা হয়। চারটি GET এন্ডপয়েন্ট এবং একটি কী।
কিভাবে এটি অর্থায়ন করা হয়
সত্যি বলতে, এটি প্রায় খরদাহীন।
তথ্য বৃহৎ-পরিমাপের পাবলিক নিউজ আর্কাইভ থেকে আসে — ইতিমধ্যে ক্রল করা নিউজ পেজের বাল্ক ডেটাসেট, যা ধারাবাহিকভাবে প্রকাশিত হয়। আমরা প্রকাশকদের কাছ থেকে কন্টেন্ট লাইসেন্স করি না এবং আমরা তাদের সার্ভার থেকে পেজ ফেচ করি না; আমরা ইতিমধ্যে পাবলিক ডেটাসেট প্রক্রিয়া করি।
এর ৯০ দিনের ডেটা, যা ইনডেক্স করা হয়েছে এবং তিনবার রিপ্লিকেট করা হয়েছে, আমাদের অন্য কাজের জন্য চালানো Elasticsearch ক্লাস্টারের প্রায় 3% জায়গা দখল করে। একটি সার্চ কোয়েরি পরিবেশন করতে আমাদের স্পেয়ার সিপিইউ টাইম লাগে। পরিমাপকৃত ক্ষমতা প্রতি সেকেন্ডে 1,247 রিকোয়েস্ট; একক কলার 20 পর্যন্ত সীমাবদ্ধ।
এটি কি মুক্ত থাকবে
ফ্রি প্ল্যানটি অব্যাহত থাকবে। আমরা আগে প্রতিশ্রুতি দিয়েছিলাম যে খোঁজ ছাড়াই খোঁজা চালু থাকবে; তা 2026-এ শেষ হয়েছিল, এবং পরিবর্তনের লগ কেন তা বলে। আরও কোনো পরিবর্তন ঘটার আগেই সেখানে ঘোষণা করা হবে।
এটি কে পরিচালনা করে
একটি ছোট স্বাধীন দল যা তাদের দৈনিক কাজ হিসেবে সার্চ এবং ডেটা ইনফ্রাস্ট্রাকচার পরিচালনা করে — Elasticsearch ক্লাস্টার, ক্রলার এবং পাইপলাইন। এই সার্ভিসটি একই ইনফ্রাস্ট্রাকচারে চলে, ঠিক একই কারণে এটি বিনামূল্যে দেওয়া সম্ভব।
যোগাযোগ
- প্রকাশকরা বাদ দেওয়ার অনুরোধ জানাতে পারেন: প্রকাশক দেখুন। অনুরোধগুলো মেনে নেওয়া হয়, কোনো আপত্তি নেই।
- বাল্ক ডেটা: যদি আপনি হাজার হাজার অনুরোধ করার পরিকল্পনা করেন, তবে আগে যোগাযোগ করুন — ডেটা হস্তান্তরের জন্য HTTP-এর চেয়ে আরও ভালো উপায় রয়েছে।
- বগ এবং ভুল তথ্য: আমাদের বলুন কোন আর্টিকেলটিতে কী সমস্যা হয়েছে। ভুল দেশ বা তারিখের লেবেল সবচেয়ে সাধারণ এবং এটি জানালে সবচেয়ে বেশি উপকার হয়।
ইমেইল করুন [email protected]।
আমরা কী করি না
- আমরা আর্টিকেলের বিষয়বস্তু হোস্ট করি না। প্রতিটি প্রতিক্রিয়াতে মূল
urlথাকে — অ্যাট্রিবিউট দিন এবং লিংক ব্যাক করুন। - আমরা আপনার ডেটা বিক্রি করি না বা বিজ্ঞাপন চালাই না। গোপনীয়তা দেখুন।
- আমরা পাবলিশারদের বিশ্বস্ততার ভিত্তিতে র্যাংক করি না বা রাজনৈতিক ফিল্টার প্রয়োগ করি না। কমন ক্রল যা পেয়েছে, আপনি তাই পাবেন, এবং তার পরিণতি আছে।
