דלגו לתוכן
TECH

AWS: באג מרוץ באוטומציית ה-DNS מחק את הכתובת של DynamoDB והשבית את us-east-1

לפי סיכום האירוע של AWS, באג מרוץ באוטומציית ה-DNS של DynamoDB השאיר רשומה ריקה, ושירותי ענן רבים באזור us-east-1 נפגעו ב-20 באוקטובר 2025 במשך כ-14 וחצי שעות.

AWS: באג מרוץ באוטומציית ה-DNS מחק את הכתובת של DynamoDB והשבית את us-east-1

TL;DR בקצרה

  • ב-20 באוקטובר 2025 החל מ-09:48 שעון ישראל נכשלו חיבורים ל-DynamoDB באזור us-east-1 של AWS.
  • הסיבה: באג מרוץ בין שני מופעים של רכיב ה-DNS Enactor מחק את כל כתובות ה-IP של נקודת הקצה של השירות.
  • גם אחרי שהכתובת חזרה, שגיאות בהקמת שרתי EC2 ובמאזני עומס נמשכו עד 00:20 בלילה.
  • AWS השביתה בכל העולם את אוטומציית ה-DNS של DynamoDB עד שתתקן את הבאג.

תקלה ב-DNS של DynamoDB באזור us-east-1 של AWS שיבשה ב-20 באוקטובר 2025 שירותי ענן רבים, וארכה כ-14 וחצי שעות. לפי סיכום האירוע ש-AWS פרסמה, הכול התחיל בבאג מרוץ (race condition) בין שני מופעים של רכיב אוטומציה. הבאג מחק את כל כתובות ה-IP של נקודת הקצה האזורית של DynamoDB.

השעות כאן הן שעון ישראל, והמרנו אותן מהסיכום של AWS. התקלה החלה ב-09:48 בבוקר. לפי כלי תקשורת, בין הנפגעים היו Snapchat, Fortnite, Coinbase, Robinhood ו-Perplexity. Signal אישרה שגם היא סבלה מהתקלה. AWS קבעה שהאירוע הסתיים ב-00:20 לפנות בוקר של 21 באוקטובר.

DynamoDB ושני מופעי ה-Enactor שהתנגשו: כך נמחקה רשומת ה-DNS

DynamoDB מחזיקה מאות אלפי רשומות DNS. הן מנתבות את התנועה לצי גדול של מאזני עומס. כדי לעדכן אותן, AWS מפעילה שני רכיבים עצמאיים.

הראשון, DNS Planner, יוצר תוכניות DNS חדשות. השני, DNS Enactor, מחיל אותן בשירות Route 53. ה-Enactor רץ במקביל בשלושה אזורי זמינות, והוא בודק פעם אחת בתחילת העבודה שהתוכנית חדשה מהקודמת.

ממש לפני התקלה, אחד ה-Enactors נתקל בעיכובים חריגים. בינתיים ה-Planner יצר דורות חדשים של תוכניות, וה-Enactor השני החיל תוכנית חדשה במהירות. כשסיים, הוא הפעיל ניקוי של תוכניות ישנות. באותו רגע ה-Enactor האיטי החיל תוכנית ישנה מאוד על נקודת הקצה האזורית. הבדיקה שאמורה הייתה לעצור זאת כבר לא תקפה, כי חלף זמן רב מדי.

ה-Enactor השני מחק את התוכנית הישנה, וכל כתובות ה-IP של נקודת הקצה נעלמו. המערכת נשארה במצב לא עקבי, ואף Enactor לא הצליח להחיל תוכניות חדשות. לפי AWS, רק מפעילים שהתערבו ידנית הצליחו לתקן את המצב.

המהנדסים זיהו את מצב ה-DNS כמקור הבעיה ב-10:38. כל נתוני ה-DNS שוחזרו ב-12:25. עד 12:40 הלקוחות הצליחו להתחבר שוב, כשהרשומות הישנות במטמון פגו. כך הסתיימה התקלה הראשית, כשלוש שעות אחרי תחילתה.

גם אחרי שהכתובת חזרה: EC2, מאזני עומס ושירותים נוספים

ההפרעה לא נגמרה בשחזור ה-DNS. מערכת DWFM, שמנהלת את השרתים הפיזיים של EC2, תלויה ב-DynamoDB. בזמן התקלה פג תוקפם של החוזים (leases) בינה לבין השרתים.

אחרי שהכתובת חזרה, ניסתה המערכת לחדש את כולם בבת אחת. היא נכנסה למצב של התמוטטות עומס, ולא היה לה תהליך התאוששות מוכן. מהנדסים הגבילו את העבודה ב-14:14 והפעילו מחדש מארחים מסוימים.

עד 20:36 נכשלה הקמה של מופעי EC2 חדשים. מופעים שכבר רצו לפני התקלה נשארו תקינים. בהמשך, עיכוב בהפצת הגדרות הרשת הכשיל לסירוגין את בדיקות התקינות של Network Load Balancer. צמתים תקינים הוסרו מה-DNS וחזרו, ולקוחות ראו שגיאות חיבור בין 15:30 ל-00:09 בלילה.

התקלה פגעה גם ב-Lambda, ב-ECS, ב-EKS, ב-Amazon Connect, ב-STS ובהתחברות למסוף הניהול. חלק מאשכולות Redshift חזרו לפעול רק ב-14:05 ביום המחרת.

מה זה אומר עבורכם

  • מפו תלות ב-us-east-1: בתקלה הזו נכשלה ההתחברות של משתמשי IAM ושל IAM Identity Center באזור us-east-1. גם מרכז התמיכה של AWS סבל מהתקלה.
  • שמרו קיבולת קיימת: הקמה של שרתים חדשים נכשלה שעות. שירותים קריטיים צריכים לרוץ על מופעים שכבר פועלים, ולא להסתמך על הקמה בזמן אירוע.
  • בדקו את תוכנית הגיבוי הרב-אזורית: טבלאות גלובליות של DynamoDB נשארו נגישות באזורים אחרים. ההעתקה אליהן התעכבה. תרגלו מעבר אמיתי ואל תסתפקו בהגדרה.
  • הכינו גישה חלופית לניהול: בדקו איך נכנסים למסוף כשאזור אחד נופל, ואיפה מוגדר ה-Identity Center שלכם.
  • אל תניחו שהסיום הוא חזרה לשגרה: אחרי תיקון הסיבה, EC2 ו-NLB נשארו לא יציבים שעות. תכננו לכך כוח אדם ותקשורת ללקוחות.

מה AWS משנה אחרי תקלת DynamoDB

AWS כבר השביתה בכל העולם את אוטומציית ה-DNS Planner וה-DNS Enactor של DynamoDB. לפני שתפעיל אותן מחדש, היא תתקן את באג המרוץ ותוסיף הגנות מפני החלת תוכנית שגויה.

היא מתכננת גם בקרת קצב ב-NLB, שתגביל כמה קיבולת אפשר להוריד בזמן כשל בבדיקות תקינות. בנוסף, היא תוסיף מערך בדיקות ל-EC2 שיתרגל את תהליך ההתאוששות של DWFM. הסיכום לא קובע מועד להפעלה מחדש של האוטומציה.

מקורות והרחבה

  1. Summary of the Amazon DynamoDB Service Disruption in the Northern Virginia (US-EAST-1) RegionAWS
  2. AWS outage disrupts global apps and servicesThe Paypers

הכתבה נכתבה במקור בעברית על ידי מערכת GEEKLIK, על בסיס המקורות שלמעלה ובדיקת העובדות מולם.

מצאתם טעות? דווחו לנו
עקבו אחרי GEEKLIK

MORE FROM TECH

לכל הכתבות בטכנולוגיה
טכנולוגיה · 14 בנובמבר 2026

עדכוני Windows של נובמבר: Microsoft מאשרת תקלות בהתקנה, בהדפסה ובהפעלת רישיונות

אחרי עדכון האבטחה של נובמבר, Microsoft הכירה בארבע תקלות: עדכון שנתקע בהתקנה, הדפסה שנכשלת במסמכי Word מסוימים, שגיאת הפעלה בסביבות KMS וחיבורים פתוחים ב-SQL Server. הנה מה לבדוק.