آیا s3 مبتنی بر HDFS است؟
آیا s3 مبتنی بر HDFS است؟

تصویری: آیا s3 مبتنی بر HDFS است؟

تصویری: آیا s3 مبتنی بر HDFS است؟
تصویری: کدام فایل سیستم برای استفاده از HDFS یا Amazon S3 2024, نوامبر
Anonim

S3 در واقع یک ذخیره سازی بی نهایت در فضای ابری است اما HDFS نیست. HDFS بر روی ماشین های فیزیکی میزبانی می شود، بنابراین می توانید هر برنامه ای را در آنجا اجرا کنید. شما نمی توانید هیچ چیزی را اجرا کنید S3 به عنوان فقط Object Store و نه FS.

سپس، آیا s3 یک سیستم فایل توزیع شده است؟

S3 یک نیست سیستم فایل توزیع شده . این یک شی باینری است که داده ها را در جفت های کلید-مقدار ذخیره می کند. این اساسا یک نوع پایگاه داده NoSQL است. هر سطل یک "پایگاه داده" جدید است که کلیدها "مسیر پوشه" شما هستند و مقادیر اشیای باینری هستند ( فایل ها ).

همچنین ممکن است بپرسید که آیا AWS مبتنی بر Hadoop است؟ هادوپ چارچوبی است که به پردازش مجموعه داده های بزرگ در چندین رایانه کمک می کند. این شامل Map/Reduce (پردازش موازی) و HDFS (سیستم فایل توزیع شده). AWS انبار داده است ساخته شده در بالای یک فناوری اختصاصی که در اصل توسط ParAccel توسعه یافته است.

علاوه بر این، چگونه می توانم فایل ها را از s3 به HDFS منتقل کنم؟

پاسخ. مستقیم وجود ندارد روشی برای کپی فایل ها از S3 به HDFS بدون گذراندن از طریق محلی فایل ها . با این حال، می توانید از جزء tSystem در یک Job استاندارد برای فراخوانی Native استفاده کنید هادوپ دستوری که معمولاً از آن استفاده می کنید کپی فایل ها ، مثلا، s3 -dist-cp.

پایگاه داده s3 چیست؟

آمازون S3 یا Amazon Simple Storage Service یک سرویس ارائه شده توسط Amazon Web Services (AWS) است که ذخیره سازی اشیا را از طریق یک رابط وب سرویس فراهم می کند. آمازون S3 از همان زیرساخت ذخیره سازی مقیاس پذیر استفاده می کند که Amazon.com برای اجرای شبکه تجارت الکترونیک جهانی خود استفاده می کند.

توصیه شده: