מערכת התחבורה האוטומטית של FastComments

مقدمة

מערכת התחבורה האוטומטית של FastComments (FARTS) היא שכבת השירות והתחבורה שלנו. FARTS עוזרת עם עומסי תנועה, מנתבת תנועה על פי מיקום המשתמש ואולי גם על פי העומס בעתיד. היא מורכבת מכמה מערכות שונות, שכבת DNS מודעת גיאוגרפית, פרוקסי DB, רפליקציה של DB, ניהול תעודות SSL, פרוקסי הפוך ו-CDN המשתמש במטמון LRU שנשמר בדיסק כדי לאחסן נכסים בקצה.

פעיל-פעיל

גרסה האחרונה של FART מכילה פרוקסי ושכבת רפליקציה מובנית עבור מסד הנתונים שלנו. זה מאפשר ל-FastComments להיות פעילה-פעילה עם זמינות כתיבה גלובלית, מה שמבטיח ש-FARTS שלנו יהיו עקביים בסופו של דבר. פרטים נוספים כאן.

גישה שלקחנו למעשה בשלב מוקדם הייתה לבדוק אם נוכל ליצור פורק פעיל-פעיל של MongoDB. אחד המהנדסים שלנו (Sloperators) הצליח באמת להשיג זאת עם Opus 4.6, עם זאת, החלטנו שהסיכון לעשות זאת היה גבוה יותר מאשר לבנות מערכת מבודדת משלנו.

Rust בקנה מידה

חלק מהמניע ליצירת FART היה להחליף כמה שירותים קיימים שנכתבו ב-Java. לאחר שחשבנו על כך במשך זמן מה, החלטנו לשלב את כל אלה לשירות Rust אחד כדי להפחית את העומס בזמן הריצה. זה היה פשרה מקובלת כי אנחנו לא מפעילים את FART לעיתים קרובות. FART מוודא שהיא מתודלקת עם LTO, כך שנוכל באמת לתת לה לרוץ.

בזמן שעבדנו הרבה על ניסיונות לתקנן את המערכת הישנה ב-Java עם GC שונים וכו', בסופו של דבר פשוט החלטנו ש-Rust אסינכרוני + Mimalloc ביצעו באופן משמעותי טוב יותר על אותו חומרה עם דרישות זיכרון הרבה יותר נמוכות, כך שהמעבר היה לא מסובך.

Rust התגלה כאכן נהדר עבור קוד הקשור לרשת שמשתמש heaps משותפים ואת לוקס. עם זאת, הוא לא חסין לבעיות בזמן הריצה. אפשר אולי להזכיר שקוד שנכתב על ידי LLMs ב-Rust הוא די רגיש ל-deadlocks, ואחת הדרכים לעקוף את זה היא לעצב מערכות כמכונות מצב קלות להבנה, במקום סתם ערימות של async/await.

המאסטר של FART

כל פריסת FART מכילה את המאסטר שלה. המאסטר אחראי על ארגון קרונים, webhooks, וכדומה.

השפעת הלקוח

מערכת FART נמצאת ביצור כבר כעבור שנה. רק לאחרונה ביצענו את המעבר לפריסת פעיל-פעיל. יש השפעה מסוימת על קריאת השWrites ваших ברחבי אזורים, שכוללת בפוסט הבלוג המקושר למעלה וב-במסמכים.

FART פועלת בשקט ברקע, אף על פי שנוכחותה תמיד מורגשת. אנו מקווים שתמצאו שהמערכות שלנו מהירות יותר עבור הצרכים שלכם (בעיקר פעולות משתמש אשר גורמות לשינויים בנתונים יהיו מהירות יותר בכמה אזורים).

פריסות

הפריסה משתמשת באותו מערכת תיאום גלובלית בה אנו משתמשים לפריסת השירותים עצמם. דוקומנטציית FART ממליצה על כך ש-Slopertators לעולם לא יאמינו בפריסה, תמיד יאמתו את התוכן לפני השחרור.

לאחר הפריסה, התראות FART עוקבות אחרי מדיניות הסלמה: קודם חדר, אחר כך קומה, ואז הבניין.

לסיכום

אומרים שהאינטרנט הוא סדרת צינורות, אבל בעצם זה סדרת פלטות.

כמו בכל גרסה מרכזית, אנו שמחים שיכולנו לקחת את הזמן לאופטימיזציה, בדיקה, ושחרור נכון של שינוי זה. אנחנו נרגשים לגבי מה שמגיע בהמשך. FastComments אמור להתרחב בצורה טובה יותר ולהחזיק זמן פעילות טוב יותר בטווח הארוך עם עבודה זו. כמו שאומר ספר ההפעלה של FART: "אם אתה מרגיש משהו, תגיד משהו". תן לנו לדעת למטה אם אתה מגלה בעיות כלשהן.