Skip to main content
Ramin Khavarzadeh DATA · ANALYSIS · PERSPECTIVE
Data SOURCES

منابع داده و سلامت دریافت

هر عددی که در این سایت می‌بینید از یکی از منابع این صفحه آمده. برای هر منبع نوشته‌ایم چه چیزی از آن می‌گیریم، دادهٔ آن دربارهٔ چه دوره‌ای است، خود منبع با چه تناوبی منتشر می‌کند، ما با چه برنامه‌ای سر می‌زنیم، و آخرین بار کی موفق شدیم. «تازه» یعنی آخرین دریافت موفق ما از دو برابر تناوب انتشار آن منبع تازه‌تر است — نه اینکه داده دربارهٔ امروز باشد: زمان دریافت با دورهٔ مرجع داده یکی نیست؛ دادهٔ سالانهٔ بانک جهانی که دیروز دریافت شده هنوز دادهٔ سال گذشته است. «ناموفق» یعنی سه تلاش پیاپی خطا داده و صفحه‌ها از آخرین نسخهٔ خوب تغذیه می‌شوند.

رابط‌های برنامه‌نویسی

Source چه چیزی می‌گیریم دورهٔ مرجع تناوب انتشار برنامهٔ بررسی آخرین دریافت موفق Status مجوز / شرایط
FRED — فدرال‌رزرو سنت‌لوئیس نرخ اوراق خزانهٔ ۱۰سالهٔ آمریکا، نرخ مؤثر وجوه فدرال، شاخص نوسان VIX واحد: درصد؛ VIX به واحد شاخص روز معاملاتی (روزهای کاری آمریکا)؛ روزهای تعطیل مقدار ندارد و «.» خود FRED به‌صورت مقدار غایب ذخیره می‌شود. Daily با اجرای زمان‌بندی‌شده، هر ۶ ساعت (پس از فعال‌شدن آن) 28 شهریور 1405، 22:07 1 ساعت پیش تازه DGS10 و DFF داده‌های هیئت فدرال‌رزرو و مالکیت عمومی‌اند؛ VIXCLS متعلق به CBOE است و طبق یادداشت کپی‌رایت صفحهٔ FRED با ذکر منبع نمایش داده می‌شود؛ SP500 عمداً دریافت نمی‌شود چون بازنشر آن نیاز به مجوز S&P Dow Jones Indices دارد.
npm registry دانلود روزانهٔ SDK رسمی OpenAI، Anthropic و Google و React به‌عنوان مبنا واحد: دانلود در روز (جمع هفتگی) روز؛ روزهایی که npm صفر گزارش می‌کند غایب تلقی می‌شوند و هفته از روزهای موجود مقیاس می‌شود Daily هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن) نامشخص بررسی‌نشده — شمار دانلود پکیج‌های عمومی با ذکر منبع نمایش داده می‌شود.
tgju.org قیمت پایانی روزانه و نرخ لحظه‌ای انس طلای جهانی، شاخص کل بورس و بیت‌کوین؛ چند ابزار دیگر فقط برای محاسبات داخلی واحد: ریال (در نمایش: تومان)؛ قیمت‌های جهانی به واحد خودشان؛ واحد شاخص قیمت پایانی هر روز؛ نرخ لحظه‌ای فقط وقتی از آخرین پایانی تازه‌تر باشد جای «امروز» را می‌گیرد Live هنگام بازدید هر ۱۰ دقیقه؛ برای آزمایشگاه هر ۶ ساعت 28 شهریور 1405، 22:39 1 ساعت پیش تازه بررسی‌نشده — با ذکر منبع و پیوند به صفحهٔ هر ابزار نمایش داده می‌شود؛ ابزارهای ارزی و چند ابزار حساس دیگر هرگز نمایش داده نمی‌شوند.
TSETMC — سازمان بورس شاخص هم‌وزن بورس، شاخص فرابورس، ارزش و تعداد معاملات، و قیمت پایانی و مشخصات ۱۲۰ نماد واحد: واحد شاخص، ریال (در نمایش: تومان و همت) آخرین جلسهٔ معاملاتی؛ تغییر هفتگیِ شاخص هم‌وزن و فرابورس از نمونه‌های روزانهٔ خودمان ساخته می‌شود چون منبع تاریخچه ندارد Live نمای بازار هر ۱۰ دقیقه هنگام بازدید؛ جدول ۱۲۰ نماد در پس‌زمینه هر ۱۰ دقیقه هنگام بازدید نامشخص بررسی‌نشده — با ذکر منبع نمایش داده می‌شود؛ نام هر نماد همان است که خود TSETMC برمی‌گرداند.
بازارگاه آنلاین میانهٔ قیمت ده کالای پربازدید هر دسته و پرفروش‌های هر دسته واحد: ریال (در نمایش: تومان) لحظهٔ دریافت؛ تغییر هفتگی فقط از نمونه‌های روزانهٔ خودمان ساخته می‌شود Live هر ساعت هنگام بازدید؛ با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن) 28 شهریور 1405، 23:45 چند دقیقه پیش تازه بررسی‌نشده — فقط عنوان، قیمت و پیوند فهرست‌ها ذخیره می‌شود؛ تصویر یا توضیحات بازنشر نمی‌شود و نام بازارگاه در صفحات نمی‌آید.
بازدید صفحات ویکی‌پدیا بازدید روزانهٔ صفحهٔ انگلیسی ChatGPT، Claude و Gemini واحد: بازدید در روز روز؛ ویکی‌مدیا با دو روز تأخیر منتشر می‌کند Daily هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن) نامشخص بررسی‌نشده — آمار بازدید صفحات با ذکر منبع نمایش داده می‌شود.
بانک جهانی — داده‌های باز رشد اقتصادی، تورم، بیکاری، سهم تجارت، نفوذ اینترنت و موبایل، جمعیت و ساختار سنی و شهرنشینی برای جهان، آمریکا، چین، اتحادیه اروپا، هند و آلمان واحد: درصد، درصد از تولید ناخالص داخلی، نفر، به ازای هر ۱۰۰ نفر — طبق تعریف خود بانک سال میلادی؛ بانک ماه‌ها پس از پایان هر سال منتشر و بعداً بازبینی می‌کند. تاریخ دریافت ما با دورهٔ داده یکی نیست؛ «آخرین بازبینی منبع» جداگانه ذخیره می‌شود. سالانه هفته‌ای یک بار، شنبه‌ها، با اجرای زمان‌بندی‌شده (پس از فعال‌شدن آن) نامشخص طبق مستندات توسعه‌دهندگان بانک جهانی «باز و رایگان» است (datahelpdesk.worldbank.org/knowledgebase/articles/889392)؛ فقط شاخص‌ها و کشورهای فهرست انتشار سایت منتشر می‌شود و ایران عمداً حذف است.

فایل‌ها و فیدها

Source چه چیزی می‌گیریم دورهٔ مرجع تناوب انتشار برنامهٔ بررسی آخرین دریافت موفق Status مجوز / شرایط
Eurocontrol شمار پروازهای روزانهٔ کل شبکهٔ اروپا و نسبت به همان روز ۲۰۱۹ واحد: پرواز در روز؛ درصد نسبت به ۲۰۱۹ روز؛ آخرین روز موجود در فایل نمایش داده می‌شود Daily هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن) نامشخص بررسی‌نشده — شمار پروازهای شبکه با ذکر منبع نمایش داده می‌شود.
Indeed Hiring Lab شاخص آگهی‌های شغلی آمریکا برای «داده و تحلیل»، «توسعهٔ نرم‌افزار» و کل بازار واحد: شاخص؛ فوریهٔ ۲۰۲۰ (بهمن ۱۳۹۸) = ۱۰۰، تعدیل فصلی روز؛ آخرین روز موجود در فایل نمایش داده می‌شود Daily هر ۳۰ دقیقه هنگام بازدید؛ با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن) نامشخص بررسی‌نشده — مجموعه‌دادهٔ عمومی Indeed Hiring Lab با ذکر منبع نمایش داده می‌شود.
RSS ایسنا، ایرنا، مهر شمار روزانهٔ تیترهای مرتبط با ارز، تورم، طلا، مسکن و اشتغال واحد: تعداد تیتر در روز لحظهٔ خواندن فید (هر فید فقط ~۳۰ خبر آخر را دارد)؛ سری از روز راه‌اندازی جمع می‌شود Live با هر ساخت آزمایشگاه (تقریباً هر ساعت)؛ یک شمار در روز ثبت می‌شود 28 شهریور 1405، 23:52 چند دقیقه پیش تازه بررسی‌نشده — فقط شمار تیترهایی که به هر موضوع اشاره دارند ذخیره می‌شود؛ هیچ تیتر یا متنی بازنشر نمی‌شود.

خواندن از صفحهٔ سایت

Source چه چیزی می‌گیریم دورهٔ مرجع تناوب انتشار برنامهٔ بررسی آخرین دریافت موفق Status مجوز / شرایط
گوگل ترندز (ایران) علاقهٔ جستجوی دسته‌های کالا، عبارت‌های آزمایشگاه (ارز، وام، مهاجرت، کالای بادوام…) و برندهای ایرانی واحد: شاخص نسبی ۰ تا ۱۰۰ درون هر درخواست؛ بین درخواست‌ها قابل مقایسه نیست هفتهٔ کامل گذشته (هفتهٔ ناقص جاری حذف می‌شود)؛ برای بعضی سری‌ها روزانهٔ سه‌ماهه و هفتگی پنج‌ساله هفتگی با اجرای زمان‌بندی‌شده هر ۶ ساعت (پس از فعال‌شدن آن)؛ آزمایشگاه هر ۱۲ ساعت، برندها روزی یک بار، سبد کالا با هر بازدید پس از ۳۰ دقیقه 28 شهریور 1405، 23:45 چند دقیقه پیش تازه بررسی‌نشده — API رسمی ندارد. مقادیر نسبی (۰ تا ۱۰۰ درون همان سبد) با ذکر منبع به‌عنوان «علاقهٔ جستجو» نمایش داده می‌شود، هرگز به‌عنوان فروش یا تعداد جستجو.

واردشده به‌صورت دستی

Source چه چیزی می‌گیریم دورهٔ مرجع تناوب انتشار برنامهٔ بررسی آخرین دریافت موفق Status مجوز / شرایط
مرکز آمار ایران (برآورد ۲۰۲۳) جمعیت و مساحت ۳۱ استان واحد: نفر؛ کیلومتر مربع برآورد سال ۲۰۲۳ میلادی (۱۴۰۲)؛ آخرین سرشماری کامل ۱۴۰۰ است و تفکیک استانی آن هنوز مستقیماً از مرکز آمار گرفته نشده نامنظم دستی — بررسی خودکار ندارد واردشدهٔ دستی جدول ویکی‌پدیا با مجوز CC BY-SA و ذکر منبع، به نقل از ارقام مرکز آمار ایران؛ برآورد است نه سرشماری و همین‌طور برچسب می‌خورد.

ساخت شاخص‌ها و صفحه‌ها

Source چه چیزی می‌گیریم برنامهٔ بررسی آخرین ساخت موفق Status
آزمایشگاه کسب‌وکار و داده از منابع: گوگل ترندز (ایران)، tgju.org، RSS ایسنا، ایرنا، مهر با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) 28 شهریور 1405، 23:52 چند دقیقه پیش تازه
بازار ایران در یک نگاه از منابع: tgju.org با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
بازار کار داده از منابع: Indeed Hiring Lab با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
بازارگاه آنلاین چه می‌فروشد از منابع: بازارگاه آنلاین با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
پرواز اروپا از منابع: Eurocontrol با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
تحلیل بازار بورس از منابع: tgju.org، TSETMC — سازمان بورس با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
ترند کالاها از منابع: گوگل ترندز (ایران)، بازارگاه آنلاین با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) 28 شهریور 1405، 23:45 چند دقیقه پیش تازه
دوئل توجه از منابع: بازدید صفحات ویکی‌پدیا با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
سبد کالا (علاقهٔ جستجو) از منابع: گوگل ترندز (ایران) با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
مسابقهٔ پذیرش هوش مصنوعی از منابع: npm registry با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
نمادهای برتر بورس از منابع: TSETMC — سازمان بورس با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
یک ابزار بازار (صفحهٔ جزئیات) از منابع: tgju.org با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
یک رابطهٔ آزمایشگاه (صفحهٔ جزئیات) از منابع: سری‌های کش‌شدهٔ آزمایشگاه با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) نامشخص
یک شاخص آزمایشگاه (صفحهٔ جزئیات) از منابع: سری‌های کش‌شدهٔ آزمایشگاه با هر ساخت (هنگام بازدید، یا با اجرای زمان‌بندی‌شده پس از فعال‌شدن آن) 28 شهریور 1405، 22:39 1 ساعت پیش تازه

METHOD هر تلاش برای رسیدن به یک منبع با زمان شروع، مدت، نتیجه و اینکه آیا داده‌ای واقعاً تغییر کرده ثبت می‌شود. انتشار هر سری تصمیمی جداگانه است: وجود یک منبع در این فهرست یا وجود داده در پایگاه، به‌خودی‌خود چیزی را عمومی نمی‌کند. دادهٔ سالانه و ماهانه هرگز «زنده» نامیده نمی‌شود، و علاقهٔ جستجو هرگز به‌جای فروش ارائه نمی‌شود. Methodology