منابع داده و سلامت دریافت
هر عددی که در این سایت میبینید از یکی از منابع این صفحه آمده. برای هر منبع نوشتهایم چه چیزی از آن میگیریم، دادهٔ آن دربارهٔ چه دورهای است، خود منبع با چه تناوبی منتشر میکند، ما با چه برنامهای سر میزنیم، و آخرین بار کی موفق شدیم. «تازه» یعنی آخرین دریافت موفق ما از دو برابر تناوب انتشار آن منبع تازهتر است — نه اینکه داده دربارهٔ امروز باشد: زمان دریافت با دورهٔ مرجع داده یکی نیست؛ دادهٔ سالانهٔ بانک جهانی که دیروز دریافت شده هنوز دادهٔ سال گذشته است. «ناموفق» یعنی سه تلاش پیاپی خطا داده و صفحهها از آخرین نسخهٔ خوب تغذیه میشوند.
سرور جمعآوری داده
- آخرین بستهٔ دریافتی
- ۱۷ مهر ۱۴۰۵، ۱۸:۴۰
- نقاط جدید در آخرین بسته
- ۵
- دیتاستهای منتشرشده
- ۶ از ۸
- دیتاست عقبافتاده
- ۰
این دادهها را این سایت خودش نمیگیرد؛ یک سرور جداگانه آنها را جمع، اعتبارسنجی و نگهداری میکند و نتیجه را میفرستد. دیتاستها
- تازه دریافت موفق در بازهٔ انتظار
- کهنه آخرین دریافت موفق قدیمیتر از انتظار
- ناموفق سه خطای پیاپی یا بیشتر
- نامشخص هنوز دریافتی ثبت نشده
رابطهای برنامهنویسی
| منبع | چه چیزی میگیریم | دورهٔ مرجع | تناوب انتشار | برنامهٔ بررسی | آخرین دریافت موفق | وضعیت | مجوز / شرایط |
|---|---|---|---|---|---|---|---|
| FRED — فدرالرزرو سنتلوئیس | نرخ اوراق خزانهٔ ۱۰سالهٔ آمریکا، نرخ مؤثر وجوه فدرال، شاخص نوسان VIX واحد: درصد؛ VIX به واحد شاخص | روز معاملاتی (روزهای کاری آمریکا)؛ روزهای تعطیل مقدار ندارد و «.» خود FRED بهصورت مقدار غایب ذخیره میشود. | روزانه | با اجرای زمانبندیشده، هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۶ ۲ ساعت پیش | تازه | DGS10 و DFF دادههای هیئت فدرالرزرو و مالکیت عمومیاند؛ VIXCLS متعلق به CBOE است و طبق یادداشت کپیرایت صفحهٔ FRED با ذکر منبع نمایش داده میشود؛ SP500 عمداً دریافت نمیشود چون بازنشر آن نیاز به مجوز S&P Dow Jones Indices دارد. |
| GitHub | شمار ستارههای چند مخزن متنباز هوش مصنوعی و داده واحد: ستاره (کل) | روز عکسبرداری؛ تاریخچه از روز شروع جمعآوری است | روزانه | روزی یک بار با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۱۸:۴۰ ۸ ساعت پیش | تازه | متادیتای عمومی مخزنها؛ شرایط GitHub نمایش شمار عمومی ستارهها را منع نمیکند و استفادهٔ بیش از حد را منع میکند. |
| Hugging Face | دانلود ۳۰روزهٔ چند مدل باز واحد: دانلود در ۳۰ روز گذشته | روز عکسبرداری؛ هر مقدار مجموع ۳۰ روز منتهی به همان روز است | روزانه | روزی یک بار با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۱۸:۴۰ ۸ ساعت پیش | تازه | بررسینشده — شرایط بازنشر متادیتای Hub هنوز خوانده نشده؛ تا آن زمان جمعآوری میشود ولی منتشر نمیشود. |
| npm registry | دانلود روزانهٔ SDK رسمی OpenAI، Anthropic و Google و React بهعنوان مبنا واحد: دانلود در روز (جمع هفتگی) | روز؛ روزهایی که npm صفر گزارش میکند غایب تلقی میشوند و هفته از روزهای موجود مقیاس میشود | روزانه | هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمانبندیشده هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۰ ۲ ساعت پیش | تازه | بررسینشده — شمار دانلود پکیجهای عمومی با ذکر منبع نمایش داده میشود. |
| OpenAlex | تعداد ماهانهٔ آثار پژوهشی که چند عبارت دربارهٔ هوش مصنوعی و تجارت الکترونیک در عنوان یا چکیدهشان آمده واحد: اثر در ماه | ماه انتشار اثر؛ ماه جاری حذف میشود و ماههای اخیر با نمایهشدن آثار تازه بزرگتر میشوند | ماهانه | هر سه روز با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۵ مهر ۱۴۰۵، ۱۰:۴۴ ۲ روز پیش | تازه | دادهٔ OpenAlex با مجوز CC0 منتشر میشود؛ با ذکر منبع نمایش داده میشود. |
| tgju.org | قیمت پایانی روزانه و نرخ لحظهای انس طلای جهانی، شاخص کل بورس و بیتکوین؛ چند ابزار دیگر فقط برای محاسبات داخلی واحد: ریال (در نمایش: تومان)؛ قیمتهای جهانی به واحد خودشان؛ واحد شاخص | قیمت پایانی هر روز؛ نرخ لحظهای فقط وقتی از آخرین پایانی تازهتر باشد جای «امروز» را میگیرد | لحظهای | هنگام بازدید هر ۱۰ دقیقه؛ برای آزمایشگاه هر ۶ ساعت | ۱۸ مهر ۱۴۰۵، ۰۳:۱۰ چند دقیقه پیش | تازه | بررسینشده — با ذکر منبع و پیوند به صفحهٔ هر ابزار نمایش داده میشود؛ ابزارهای ارزی و چند ابزار حساس دیگر هرگز نمایش داده نمیشوند. |
| TSETMC — سازمان بورس | شاخص هموزن بورس، شاخص فرابورس، ارزش و تعداد معاملات، و قیمت پایانی و مشخصات ۱۲۰ نماد واحد: واحد شاخص، ریال (در نمایش: تومان و همت) | آخرین جلسهٔ معاملاتی؛ تغییر هفتگیِ شاخص هموزن و فرابورس از نمونههای روزانهٔ خودمان ساخته میشود چون منبع تاریخچه ندارد | لحظهای | نمای بازار هر ۱۰ دقیقه هنگام بازدید؛ جدول ۱۲۰ نماد در پسزمینه هر ۱۰ دقیقه هنگام بازدید | ۱۷ مهر ۱۴۰۵، ۲۲:۴۸ ۴ ساعت پیش | تازه | بررسینشده — با ذکر منبع نمایش داده میشود؛ نام هر نماد همان است که خود TSETMC برمیگرداند. |
| ادارهٔ آمار کار آمریکا (BLS) | نرخ بیکاری، اشتغال غیرکشاورزی، فرصتهای شغلی خالی و شاخص قیمت مصرفکنندهٔ آمریکا واحد: درصد، هزار نفر، شاخص (۱۹۸۲–۸۴ = ۱۰۰) | ماه میلادی؛ عددهای اخیر مقدماتیاند و بازنگریها جدا ثبت میشوند | ماهانه | روزی یک بار با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۲۲:۴۰ ۴ ساعت پیش | تازه | دادهٔ BLS کار دولت آمریکا و در مالکیت عمومی است؛ با ذکر منبع نمایش داده میشود و BLS این سایت را تأیید نمیکند. |
| بازارگاه آنلاین | میانهٔ قیمت ده کالای پربازدید هر دسته و پرفروشهای هر دسته واحد: ریال (در نمایش: تومان) | لحظهٔ دریافت؛ تغییر هفتگی فقط از نمونههای روزانهٔ خودمان ساخته میشود | لحظهای | هر ساعت هنگام بازدید؛ با اجرای زمانبندیشده هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۳ ۲ ساعت پیش | تازه | بررسینشده — فقط عنوان، قیمت و پیوند فهرستها ذخیره میشود؛ تصویر یا توضیحات بازنشر نمیشود و نام بازارگاه در صفحات نمیآید. |
| بازدید صفحات ویکیپدیا | بازدید روزانهٔ صفحهٔ انگلیسی ChatGPT، Claude و Gemini، و بازدید ماهانهٔ چند مقالهٔ هوش مصنوعی، داده و تجارت الکترونیک واحد: بازدید در روز | روز؛ ویکیمدیا با دو روز تأخیر منتشر میکند | روزانه | هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمانبندیشده هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۰ ۲ ساعت پیش | تازه | دادهٔ آماری ویکیمدیا (از جمله بازدید صفحات) با تعهد CC0 منتشر میشود؛ با ذکر منبع نمایش داده میشود. |
| بانک جهانی — دادههای باز | رشد اقتصادی، تورم، بیکاری، سهم تجارت، نفوذ اینترنت و موبایل، جمعیت و ساختار سنی و شهرنشینی برای جهان، آمریکا، چین، اتحادیه اروپا، هند و آلمان؛ و برای صفحهٔ بازار دیجیتال: کاربران اینترنت، پهنباند ثابت و دارندگی حساب مالی برای ۲۰ کشور واحد: درصد، درصد از تولید ناخالص داخلی، نفر، به ازای هر ۱۰۰ نفر — طبق تعریف خود بانک | سال میلادی؛ بانک ماهها پس از پایان هر سال منتشر و بعداً بازبینی میکند. تاریخ دریافت ما با دورهٔ داده یکی نیست؛ «آخرین بازبینی منبع» جداگانه ذخیره میشود. | سالانه | هفتهای یک بار، شنبهها، با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۳۱ ۲ ساعت پیش | تازه | طبق مستندات توسعهدهندگان بانک جهانی «باز و رایگان» است (datahelpdesk.worldbank.org/knowledgebase/articles/889392)؛ فقط شاخصها و کشورهای فهرست انتشار سایت منتشر میشود و ایران عمداً حذف است. |
| یوروستات | خرید آنلاین افراد و استفادهٔ شرکتها از هوش مصنوعی و رایانش ابری در اتحادیهٔ اروپا و چند کشور عضو واحد: درصد افراد یا شرکتها | سال نظرسنجی؛ هر شاخص سالهای اندازهگیری خودش را دارد | سالانه | هفتهای یک بار با اجرای زمانبندیشده (پس از فعالشدن آن) | ۱۳ مهر ۱۴۰۵، ۱۷:۴۰ ۴ روز پیش | تازه | بازاستفاده با ذکر منبع مجاز است (تصمیم ۲۰۱۱/۸۳۳/EU کمیسیون اروپا؛ محتوای سایت با CC BY 4.0). |
فایلها و فیدها
| منبع | چه چیزی میگیریم | دورهٔ مرجع | تناوب انتشار | برنامهٔ بررسی | آخرین دریافت موفق | وضعیت | مجوز / شرایط |
|---|---|---|---|---|---|---|---|
| Eurocontrol | شمار پروازهای روزانهٔ کل شبکهٔ اروپا و نسبت به همان روز ۲۰۱۹ واحد: پرواز در روز؛ درصد نسبت به ۲۰۱۹ | روز؛ آخرین روز موجود در فایل نمایش داده میشود | روزانه | هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمانبندیشده هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۱ ۲ ساعت پیش | تازه | بررسینشده — شمار پروازهای شبکه با ذکر منبع نمایش داده میشود. |
| Indeed Hiring Lab | شاخص آگهیهای شغلی آمریکا برای «داده و تحلیل»، «توسعهٔ نرمافزار» و کل بازار واحد: شاخص؛ فوریهٔ ۲۰۲۰ (بهمن ۱۳۹۸) = ۱۰۰، تعدیل فصلی | روز؛ آخرین روز موجود در فایل نمایش داده میشود | روزانه | هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمانبندیشده هر ۶ ساعت (پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۱ ۲ ساعت پیش | تازه | بررسینشده — مجموعهدادهٔ عمومی Indeed Hiring Lab با ذکر منبع نمایش داده میشود. |
| RSS ایسنا، ایرنا، مهر | شمار روزانهٔ تیترهای مرتبط با چند موضوع اقتصادی، مانند مسکن و اشتغال واحد: تعداد تیتر در روز | لحظهٔ خواندن فید (هر فید فقط ~۳۰ خبر آخر را دارد)؛ سری از روز راهاندازی جمع میشود | لحظهای | با هر ساخت آزمایشگاه (تقریباً هر ساعت)؛ یک شمار در روز ثبت میشود | ۱۸ مهر ۱۴۰۵، ۰۲:۴۵ چند دقیقه پیش | تازه | بررسینشده — فقط شمار تیترهایی که به هر موضوع اشاره دارند ذخیره میشود؛ هیچ تیتر یا متنی بازنشر نمیشود. |
| فیدهای خبری گزارش روزانه | رویدادهای منتشرشده در پنجرهٔ ۷:۴۵ تا ۷:۴۵ برای نگارش گزارش روزانه واحد: تعداد رویداد در هر پنجره | زمان انتشار خود رویداد (نه زمان خواندن فید) | لحظهای | ساعتی (collect_daily_news) | ۱۸ مهر ۱۴۰۵، ۰۳:۰۰ چند دقیقه پیش | تازه | بررسینشده — فقط عنوان، نشانی و خلاصهٔ کوتاه ذخیره میشود و گزارش روزانه به منبع ارجاع میدهد. |
خواندن از صفحهٔ سایت
| منبع | چه چیزی میگیریم | دورهٔ مرجع | تناوب انتشار | برنامهٔ بررسی | آخرین دریافت موفق | وضعیت | مجوز / شرایط |
|---|---|---|---|---|---|---|---|
| گوگل ترندز (ایران) | علاقهٔ جستجوی دستههای کالا، عبارتهای آزمایشگاه (مانند وام و کالای بادوام) و برندهای ایرانی واحد: شاخص نسبی ۰ تا ۱۰۰ درون هر درخواست؛ بین درخواستها قابل مقایسه نیست | هفتهٔ کامل گذشته (هفتهٔ ناقص جاری حذف میشود)؛ برای بعضی سریها روزانهٔ سهماهه و هفتگی پنجساله | هفتگی | دریافت خودکار متوقف است؛ دادهٔ تازه از خروجی رسمی ترندز در صفحهٔ علاقهٔ جستجو به دستههای کالا | ۱۸ مهر ۱۴۰۵، ۰۲:۴۵ چند دقیقه پیش | داده عقب است ۲۰ از ۲۱ گروه دادهٔ تازه دارند؛ قدیمیترین داده: ۲۹ شهریور | بررسینشده — API رسمی ندارد. مقادیر نسبی (۰ تا ۱۰۰ درون همان سبد) با ذکر منبع بهعنوان «علاقهٔ جستجو» نمایش داده میشود، هرگز بهعنوان فروش یا تعداد جستجو. |
واردشده بهصورت دستی
| منبع | چه چیزی میگیریم | دورهٔ مرجع | تناوب انتشار | برنامهٔ بررسی | آخرین دریافت موفق | وضعیت | مجوز / شرایط |
|---|---|---|---|---|---|---|---|
| گوگل ترندز (خروجی رسمی، واردکردن دستی) | علاقهٔ نسبی جستجو برای عبارتهای نسخهدار هفت دستهٔ کالا و خدمات واحد: شاخص نسبی ۰ تا ۱۰۰ درون هر درخواست | هفته یا ماهِ هر مقدار؛ مقیاس هر درخواست جداست و درخواستها با هم ترکیب نمیشوند | نامنظم | دستی — هر بار که فایل تازه بارگذاری شود | — | واردشدهٔ دستی | طبق راهنمای ترندز، استفاده از اطلاعات ترندز با ذکر منبع مجاز است؛ عدد نسبی است و تعداد جستجو، فروش یا سهم بازار نیست. |
| مرکز آمار ایران (برآورد ۲۰۲۳) | جمعیت و مساحت ۳۱ استان واحد: نفر؛ کیلومتر مربع | برآورد سال ۲۰۲۳ میلادی (۱۴۰۲)؛ آخرین سرشماری کامل ۱۴۰۰ است و تفکیک استانی آن هنوز مستقیماً از مرکز آمار گرفته نشده | نامنظم | دستی — بررسی خودکار ندارد | — | واردشدهٔ دستی | جدول ویکیپدیا با مجوز CC BY-SA و ذکر منبع، به نقل از ارقام مرکز آمار ایران؛ برآورد است نه سرشماری و همینطور برچسب میخورد. |
ساخت شاخصها و صفحهها
| منبع | چه چیزی میگیریم | برنامهٔ بررسی | آخرین ساخت موفق | وضعیت |
|---|---|---|---|---|
| آزمایشگاه کسبوکار و داده | از منابع: گوگل ترندز (ایران)، tgju.org، RSS ایسنا، ایرنا، مهر | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۲:۴۵ چند دقیقه پیش | تازه |
| بازار ایران در یک نگاه | از منابع: tgju.org | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۳:۱۰ چند دقیقه پیش | تازه |
| بازار کار داده | از منابع: Indeed Hiring Lab | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۱ ۲ ساعت پیش | تازه |
| بازارگاه آنلاین چه میفروشد | از منابع: بازارگاه آنلاین | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۳ ۲ ساعت پیش | تازه |
| پرواز اروپا | از منابع: Eurocontrol | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۱ ۲ ساعت پیش | تازه |
| تحلیل بازار بورس | از منابع: tgju.org، TSETMC — سازمان بورس | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۲۲:۴۸ ۴ ساعت پیش | تازه |
| ترند کالاها | از منابع: گوگل ترندز (ایران)، بازارگاه آنلاین | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۳ ۲ ساعت پیش | تازه |
| دوئل توجه | از منابع: بازدید صفحات ویکیپدیا | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۰ ۲ ساعت پیش | تازه |
| سبد کالا (علاقهٔ جستجو) | از منابع: گوگل ترندز (ایران) | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۰ ۲ ساعت پیش | تازه |
| مسابقهٔ پذیرش هوش مصنوعی | از منابع: npm registry | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۸ مهر ۱۴۰۵، ۰۰:۲۰ ۲ ساعت پیش | تازه |
| نمادهای برتر بورس | از منابع: TSETMC — سازمان بورس | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۲۲:۴۸ ۴ ساعت پیش | تازه |
| یک ابزار بازار (صفحهٔ جزئیات) | از منابع: tgju.org | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۱۷ مهر ۱۴۰۵، ۲۲:۲۶ ۴ ساعت پیش | تازه |
| یک رابطهٔ آزمایشگاه (صفحهٔ جزئیات) | از منابع: سریهای کششدهٔ آزمایشگاه | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۵ مهر ۱۴۰۵، ۱۲:۲۷ ۱۲ روز پیش | تازه |
| یک شاخص آزمایشگاه (صفحهٔ جزئیات) | از منابع: سریهای کششدهٔ آزمایشگاه | با هر ساخت (هنگام بازدید، یا با اجرای زمانبندیشده پس از فعالشدن آن) | ۵ مهر ۱۴۰۵، ۰۰:۱۶ ۱۳ روز پیش | ناموفق خطا در دریافت یا پردازش |
METHOD هر تلاش برای رسیدن به یک منبع با زمان شروع، مدت، نتیجه و اینکه آیا دادهای واقعاً تغییر کرده ثبت میشود. انتشار هر سری تصمیمی جداگانه است: وجود یک منبع در این فهرست یا وجود داده در پایگاه، بهخودیخود چیزی را عمومی نمیکند. دادهٔ سالانه و ماهانه هرگز «زنده» نامیده نمیشود، و علاقهٔ جستجو هرگز بهجای فروش ارائه نمیشود. روششناسی