לפני שבוע ומשהו כתבתי על איטיות בשרתי Citrix עם Trend Micro, אז במשך כל הזמן הזה לא היה שום דבר רשמי של Trend אשר מדבר על הנושא הזה, למעשה במשך השבוע האחרון מהנדסי Trend היו עסוקים בהגעה ללקוחות כדי לשחזר את הבעיה ולנסות להבין למה זה קורה (אני יודע שהם ביקרו אצל לקוחות בגרמניה ובאנגליה).

אתמול סופסוף הגיעה הודעה רשמית על כך ש Trend מודעים לבעיה ושהתיקון אמור לצאת ב 31/7 (קישור), למעשה התיקון כבר קיים כמה ימים ונוסה במספר חברות, אבל רק ב 31 הוא יהפוך להיות public.

האיטיות התחילה להתרחש אחרי עידכון ה scan engine בו נוספה יכולת חדשה אשר מאפשרת תאימות למערכת ניהול תצורה בשם Clear View, לשם כך נוספה טבלה חדשה אשר תפקידה לעשות logging לגישה לקבצים, למעשה כאשר קובץ נסגר לא עם ה PID שאיתו הוא נפתח, אותו קובץ נרשם בטבלה החדשה.
פתיחה וסגירה של קבצים מתבצעת כל הזמן בתהליכי logon ו- logoff עם PID-ים שונים, מה שגורם לטבלה החדשה לגדול עד כדי טירוף.
מכאן גם אפשר להבין למה אתחול ה real time service "שחרר" את השרת, כאשר מאתחילים את ה service הטבלה מתנקת ומתחילה ספירה מחודשת.

ב hotfix המיוחל Trend פשוט הפסיקו את ההשוואה של ה PID הפותח לסוגר של הקובץ, וכך הורידו את גודל הטבלה ביותר מפי 1000, למעשה בבדיקה שנערכה אצל אחד הלקוחות נבדק שרת עם רק משתמש אחד והטבלה כבר הכילה עשרות אלפי רשומות, לאחר התקנת ה hotfix הגול ירד ל 10 רשומות בלבד.

אז מה אנחנו לומדים מכל הפיאסקו הזה? QA QA ושוב פעם QA!