S3: فئات التخزين ودورة الحياة

في الجزء الخامس عشر خزّنا كل شي بالطريقة الافتراضية. بس فكر في تطبيقك: صورة منتج تنطلب كل ثانية، وفاتورة عمرها خمس سنين ما يفتحها أحد إلا وقت التدقيق. ليش تدفع عليهم نفس السعر؟

فئات التخزين تعطيك هذا الخيار: كل ما قل الوصول للملف، قل سعر تخزينه، وزادت تكلفة أو مدة استرجاعه.

المتانة والتوفر #

مصطلحين لازم تفرق بينهم:

• المتانة (Durability): هل بيضيع الملف؟ 99.999999999% لكل الفئات، مع ملاحظة إن الفئات بمنطقة توفر واحدة تضيع بياناتها لو تدمرت المنطقة.
• التوفر (Availability): هل تقدر توصل له الحين؟ يختلف من فئة لفئة، مثلاً 99.99% لـ Standard.

الفئات #

الأسعار بالدولار لكل جيجابايت في الشهر، تقريبية لمناطق أمريكا، فراجع صفحة الأسعار لمنطقتك.

وكل هذي الفئات تحفظ البيانات في ثلاث مناطق توفر أو أكثر، إلا One Zone-IA. وعندك كمان S3 Express One Zone: أداء عالي جداً بزمن استجابة أقل من 10 ملي ثانية، في منطقة توفر واحدة، بحاوية من نوع خاص، وسعره أعلى. يناسب التحليل وتدريب النماذج اللي تحتاج سرعة كبيرة.

Intelligent-Tiering: لو ما تعرف #

لو ما تدري كم بينطلب الملف، هذي الفئة تنقله لحالها حسب الاستخدام:

تدفع رسم مراقبة بسيط لكل كائن، وما فيه رسوم استرجاع، ولو انطلب الملف يرجع للطبقة الأولى.

Glacier Flexible و Deep Archive: طلب قبل القراءة #

في هذي الفئات ما تقدر تقرأ الملف مباشرة، لازم تطلب استرجاعه أول، وتختار السرعة:

دورة الحياة (Lifecycle) #

ما تحتاج تنقل الملفات بيدك. قواعد Lifecycle تسوي هذا تلقائياً حسب عمر الملف. مثلاً سجلات تطبيق:

والقاعدة فيها نوعين من الإجراءات، وتطبقها على بادئة أو وسم محدد:

وأشياء تنتبه لها:

• النقل نازل فقط على السلم، وأقل مدة قبل Standard-IA هي 30 يوم.
• الملفات الأصغر من 128 KB ما تنتقل افتراضياً، لأن تكلفة نقلها أكبر من توفيرها.
• النقل نفسه له رسم لكل ألف كائن، فانتبه للملايين من الملفات الصغيرة.

كيف تعرف وش تختار؟ #

ما تحتاج تخمن. عندك أدوات تقرأ استخدامك الفعلي:

• Storage Class Analysis: تراقب الوصول لبادئة أو حاوية، وتقترح متى تنقل من Standard إلى Standard-IA.
• Storage Lens: لوحة على مستوى الحسابات كلها: الأحجام والنمو والحاويات اللي فيها رفعات ناقصة أو بدون تشفير. ولها مقاييس مجانية وأخرى متقدمة مدفوعة.

ولو عندك ملايين الملفات وتبي تسوي شي عليها مرة وحدة، زي تغيير الفئة أو النسخ، S3 Batch Operations تنفذه على قائمة من S3 Inventory، مع تقرير بالنتائج.

وفي المقابل، لو تشارك بيانات ضخمة مع جهة ثانية، Requester Pays تخليهم يدفعون تكلفة الطلبات والتحميل بدالك.

ولو بترفع ملايين الملفات الصغيرة اللي ما تقرأها وحدة وحدة، مثل السجلات، اجمعها في أرشيف واحد أول. كل PUT طلب مدفوع، فرفعة وحدة كبيرة ممكن تكلف أقل بكثير من مليون رفعة صغيرة.

عملي: فئات وقاعدة دورة حياة #

بنكمل بالحاوية من الجزء السابق. لو انتهت جلسة CloudShell، حط اسمها في BUCKET من جديد. ارفع ملف في فئة محددة، وشوف الفئة:

echo "monthly report" > report.txt

aws s3 cp report.txt s3://$BUCKET/reports/report.txt --storage-class STANDARD_IA

aws s3api head-object --bucket $BUCKET --key reports/report.txt \
  --query StorageClass

الحين أضف قاعدة دورة الحياة اللي في الرسم على بادئة logs/:

aws s3api put-bucket-lifecycle-configuration --bucket $BUCKET \
  --lifecycle-configuration '{
  "Rules": [{
    "ID": "logs-rule",
    "Status": "Enabled",
    "Filter": {"Prefix": "logs/"},
    "Transitions": [
      {"Days": 30, "StorageClass": "STANDARD_IA"},
      {"Days": 90, "StorageClass": "GLACIER"},
      {"Days": 365, "StorageClass": "DEEP_ARCHIVE"}
    ],
    "Expiration": {"Days": 2555},
    "AbortIncompleteMultipartUpload": {"DaysAfterInitiation": 7}
  }]
}'

aws s3api get-bucket-lifecycle-configuration --bucket $BUCKET \
  --query "Rules[0].Transitions" --output table

وهذا الجزء الممتع: ارفع ملف لـ Glacier، وحاول تقراه:

echo "old invoice" > old.txt
aws s3 cp old.txt s3://$BUCKET/archive/old.txt --storage-class GLACIER

aws s3 cp s3://$BUCKET/archive/old.txt -

بيرجع خطأ InvalidObjectState، لأن الملف محفوظ لكنه ما ينقرأ مباشرة. اطلب استرجاعه:

aws s3api restore-object --bucket $BUCKET --key archive/old.txt \
  --restore-request '{"Days": 1, "GlacierJobParameters": {"Tier": "Standard"}}'

aws s3api head-object --bucket $BUCKET --key archive/old.txt \
  --query "[StorageClass,Restore]"

بتشوف ongoing-request="true". وبعد 3 إلى 5 ساعات يصير false، ويتوفر نسخة مؤقتة تقراها ليوم واحد.

الخلاصة #

• كل ما قل الوصول، قل سعر التخزين، وزادت تكلفة الاسترجاع أو مدته.
• لو ما تعرف نمط الوصول، Intelligent-Tiering ينقل الملفات لحاله.
• انتبه لـ أقل مدة تخزين وأقل حجم محسوب ورسوم الاسترجاع.
• Lifecycle تنقل الملفات وتحذفها تلقائياً، وأضف قاعدة للرفعات الناقصة دايماً.
• Storage Lens وStorage Class Analysis تقرر بأرقام، مو بالتخمين.

اختبر نفسك #

قبل ما تكمل، جرّب هذي الأسئلة عشان تتأكد إنك فهمت الجزء. كل سؤال موقف عملي، وبعد ما تجاوب يطلع لك الشرح.

بياناتك الحين في المكان المناسب بالسعر المناسب، بس مين يقدر يوصل لها؟ في الجزء السابع عشر نغطي التشفير والروابط الموقّعة والقفل ضد الحذف.