راه های جدید برای دسترسی به BIG DATA در فضای ابری

راه های جدید برای دسترسی به BIG DATA در فضای ابری – از آنجایی که سازمان‌ها به ذخیره‌سازی بیشتری برای داده‌های خود نیاز دارند، فناوری‌های ذخیره‌سازی داده‌ها باید برای حفظ و پردازش کافی داده‌ها سازگار شوند. انبارهای داده ابری این کار را انجام می دهند و دسترسی و پردازش داده هایی مانند اطلاعات نقطه فروش، داده های تله متری از حسگرها و سرنخ های فروش تولید شده توسط وب سایت ها را آسان تر می کنند. برای کاربران Esri، ArcGIS Pro 2.9 (و جدیدتر) و ArcGIS Enterprise 10.9.1 (و جدیدتر) از اتصال به انبارهای داده ابری و انتشار آن داده ها پشتیبانی می کنند.

مزایای انبارهای داده ابری

هر کسی که با جریان های ثابت داده کار می کند – چه فهرست نویسی تراکنش های فروش برای فروشگاه های زنجیره ای مواد غذایی یا ردیابی داده های تولید شده توسط ناوگان کامیون های حمل و نقل – به یک راه حل ذخیره سازی داده نیاز دارد که بتواند با دریافت های عظیم داده های ساخت یافته همگام شود.

پایگاه داده های سنتی ممکن است در هنگام ارائه این داده ها به مخاطبان گسترده با چالش هایی مواجه شوند. اگر داده ها در محل ذخیره شوند، یک استقرار موجود احتمالاً نیاز به افزایش مقیاس دارد که هزینه قابل توجهی دارد. اگر یک مجموعه داده به عنوان منبعی برای برنامه‌ای که در سراسر جهان در دسترس است استفاده شود، دسترسی به داده‌ها در آن مقیاس به یک چالش مهم تبدیل می‌شود.

انبارهای داده ابری مزایای متعددی نسبت به سایر اشکال ذخیره سازی داده های ساخت یافته دارند، از جمله موارد زیر:

• هزینه کل مالکیت کمتر: انبارهای داده ابری در زیرساخت هایی قرار دارند که توسط یک مرکز داده نگهداری می شود. این امر هزینه های راه اندازی و نگهداری سخت افزار و شبکه مورد نیاز را کاهش می دهد.
• سرعت و عملکرد بهبود یافته: برخلاف راه‌حل‌های سنتی داده‌های ساختاریافته، انبارهای داده ابری به طور سیستماتیک با در نظر گرفتن دسترسی به داده‌ها مهندسی می‌شوند. چندین سرور برای متعادل سازی بار بهینه پیاده سازی شده اند که منجر به کارایی بیشتر در هنگام بازیابی داده ها می شود.

دسترسی و ادغام بهتر داده ها: یک مزیت مشترک کار در فضای ابری، توانایی در دسترس قرار دادن خدمات و داده ها در چندین منطقه است. این یک قابلیت مهم انبارهای داده ابری است زیرا آنها به طور مداوم داده ها را در سراسر جهان سرویس می دهند.

مقیاس پذیری و کشش: مطابق با سایر سرویس های مبتنی بر ابر، انبارهای داده ابری می توانند به طور نامحدود برای رفع نیازهای کاربران مقیاس شوند.

نحوه دسترسی به داده های ذخیره شده در انبار داده ابری

توانایی اتصال و استفاده از داده‌ها از انبارهای داده ابری در ArcGIS Pro 2.9 و ArcGIS Enterprise 10.9.1 در ویندوز، لینوکس و Kubernetes پیاده‌سازی شد. این نرم افزار از اتصال به سه انبار داده ابری پشتیبانی می کند: Google BigQuery، Snowflake و Amazon Redshift.

افزودن این داده ها به ArcGIS Pro مانند افزودن داده از هر پایگاه داده دیگری است. یکی از چالش های اصلی کار با انبارهای داده ابری، دسترسی است. دسترسی به داده‌های ذخیره‌شده در انبارهای داده ابری هزینه‌ای دارد، چیزی که توسعه‌دهندگان باید هنگام ساختن نقشه‌های وب یا برنامه‌هایی که بر این داده‌ها تکیه می‌کنند، در نظر داشته باشند.

برای متعادل کردن هزینه و دسترسی، ناشران داده می توانند داده ها را از انبارهای داده ابری به ArcGIS Enterprise به عنوان خدمات نقشه منتشر کنند. سه راه برای انجام این کار وجود دارد که بر اساس تعداد دفعات نیاز کاربران به بازیابی داده های ذخیره شده در انبارهای داده ابری است:

دسترسی مستقیم به داده‌ها: بازیابی داده‌های ذخیره‌شده در انبار داده‌های ابری راهی عالی برای ناشران داده است تا نحوه رفتار داده‌های ساختاریافته و نیمه‌ساختار یافته با سایر گردش‌های کاری را آزمایش کنند. هنگامی که آنها یک لایه تصویر نقشه را منتشر می کنند، به طور مستقیم به انبار داده ارجاع می دهد و در صورت نیاز برای انجام درخواست ها، داده ها را پرس و جو می کند. با توجه به هزینه های مربوط به بازیابی داده ها، این گردش کار باید فقط برای مجموعه داده های کوچکتر یا زمانی که به روزترین داده مورد نیاز است در نظر گرفته شود.

دسترسی به داده‌ها از طریق یک عکس فوری: هنگام انتشار داده‌ها در انبار داده ابری به‌عنوان عکس فوری، داده‌هایی که در انبار داده ابری ذخیره می‌شوند در فروشگاه داده ArcGIS کپی می‌شوند. هنگامی که یک لایه تصویر نقشه نیاز به بازیابی داده ها دارد، به جای اینکه در انبار داده ابری، به مکانی در ArcGIS Data Store اشاره می کند. این پیکربندی به سازمان‌ها اجازه می‌دهد تا از هزینه‌های مرتبط با دسترسی مستقیم به داده‌ها در انبار داده ابری اجتناب کنند.

با این حال، به خاطر داشته باشید که به‌روزرسانی‌های ایجاد شده در سطح انبار داده ابری به‌طور خودکار روی عکس فوری اعمال نمی‌شوند. برای اطمینان از انجام به‌روزرسانی‌ها، ناشران داده باید به‌روزرسانی‌های درخواستی را در پورتال ArcGIS Enterprise انجام دهند.

دسترسی به داده ها از طریق نمای مادی شده: این روش دسترسی به داده ها در انبار داده ابری از لایه های پرس و جو در ArcGIS Pro پشتیبانی می کند. در یک نمای تحقق یافته، درخواست‌ها برای بازیابی داده‌ها همچنان مستقیماً به انبار داده ابری ارسال می‌شوند، اما نه در برابر خود داده‌ها. درعوض، درخواست‌ها به یک پرس‌وجوی ذخیره‌شده مناسب در انبار داده ابری ارسال می‌شوند.

این یک گزینه میان راه برای ناشران داده است که به به روزترین داده ها در زیرمجموعه ای کاملاً تعریف شده از کل مجموعه داده نیاز دارند. برنامه‌هایی که به عملکرد سریع‌تر پرس و جو نیاز دارند، برخلاف عملکرد طراحی سریع‌تر، باید از نماهای واقعی روی عکس‌های فوری استفاده کنند.

همگام با تکامل داده های بزرگ

• همانطور که بسیاری از جهان به سمت پذیرش گسترده‌تر فناوری اینترنت اشیا (IoT) و وب 3.0 حرکت می‌کنند، میزان داده‌های تولید شده تنها به افزایش مقیاس ادامه خواهد داد. انبارهای داده ابری استانداردی است که برای کاربرانی که با حجم عظیمی از داده های ساختاریافته کار می کنند، پذیرفته شده است.
• ArcGIS Pro 2.9 (و جدیدتر) و ArcGIS Enterprise 10.9.1 (و جدیدتر) راه های مختلفی برای دسترسی به داده ها در انبارهای داده ابری ارائه می دهند که به کاربران امکان می دهد آسانتر و مقرون به صرفه تر کاوش، تجسم و به اشتراک گذاری حجم زیادی از ساختار یافته را داشته باشند. داده ها.

برای کسب اطلاعات بیشتر در مورد نحوه پشتیبانی Esri از اتصال به انبارهای داده ابری، پست های وبلاگ زیر را در بلاگ ArcGIS بخوانید:

• “Introducing Cloud Data Warehouse Support”
• “New in ArcGIS Enterprise 10.9.1: Cloud Data Warehouse Support”