אני עובד כמה שעות טובות על בניה של  Appliction Server ברשת EC2 של אמזון ..

פתאום מקבל הודעה שאי אפשר ליצור קובץ .. ניסיון נוסף .. וכישלון ..

mount -o remount  למחיצה .. ונאדה, כלום, גורנישט, אפס ..

הצצה מהירה בלוג:

touch /file.test1
touch: cannot touch `/file.test1': Read-only file system
[root@appserver:~] tail /var/log/messages
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O error, dev sda1, sector 20357104
Jul 24 09:53:11 cognifitapp kernel: end_request: I/O err

מי אמר שהכל טוב ב cloud ??

עכשיו , עד שהם יחליפו את ה storage שלהם .. טוב, אולי פשוט יותר להקים את השרת מחדש בחווה אחרת.

הפצות הלינוקס Red Hat הודיעה על זמינתה של תוכנית RHEV ר"ת של  Red Hat Enterprise Virtualization ולמעשה על מערכך מוצרים חדש המתבסס על פלטפורות ווירטואליזציה, ואשר נועד להביא את את הווירטואליזציה אל סביבות ה Enterprise כסביבה שלמה .

בתוך הכרזה זו , הוכרזה הסמכה חדשה בשם RHCVA ר"ת של Red Hat Certified Virtualization administrator , ולמעשה על קורס RH318 , קורס באורך 4 ימים מלאים (8 שעות ) בעלויות של 2120 אירו (1410 ליש"ט) – הקורס יהיה זמין בסוף ינואר תחילות פברואר .

ומבחן הזמכה הקרוי RX318 שיהיה זמין בערך באותה העת, יימשך חצי יום , ויהווה את מבחן ההסמכה לסביבות הווירטואליזציה (עלות כ 800 אירו לערך) .

בתוך כך , ממשיכים לעודד אנשי סולאריס לבצע הגירות לסביבות לינוקס ומייעדים להם קורס הקרוי RH290 הקרוי Solaris To Linux קורס בין יומיים לבעלי הסמכות סולאריס אשר מכין למבחן ה RHCE .

השבוע קיבלתי פרסום במייל להרשם לשבוע אורקל .. למי שלא יודע מדובר על שבוע של הרצאות וכו' , דבר שהפך בשנים האחרונות למסורת.

כל זה טוב ויפה, אולם בשיטוטי האתר שהוקם לצורך האירוע , במסגרת הנושא של תשתיות, מצאתי את הסדנה/ קורס הבא : all about virtualization: from theory to practice .. חביב חשבתי לעצמי , ונכנסתי לראות את התכנים (כידוע אני חובב ווירטואליזציה רציני) , אולם אז הכה בי הברק , במסגרת הקורס הזה הולכים לדבר על Xen על – VMware ועל Microsoft (ככל הנראה התכוונו לווירטואליזציה של מייקרוסופט .. אבל בצורה חובבנית מעט כתבו מייקרוסופט במקום Hyper-V ) .

מילא טעות קולמוס שכזו , אבל הבעיה הגדולה יותר היא שאורקל עצמה , כיום הינה ספקית של מערכת ווירטואליזציה , הקרויה Oracle-VM , כך שכאילו יש קורס על מוצרים מתחרים וללא המוצר של אורקל עצמה ..

אילו מייקרוסופט היתה מארגנת את הכנס (או VMware או Xen ) היה ניתן לומר ניחא – הם רוצים להשוות את פלטפורמת הווירטואליזציה שלהם לזו של המתחרים ..

אילו חברה שאין לה כלל ווירטואליזציה היתה עושה כזה קורס / סדנה , גם ניתן היה לומר שהיא מתרכזת בחלק מהפתרונות .. אולם כאשר יצרן של מערכת ווירטואליזציה לא שם את המוצר שלו .. זה קצת מוזר .

כאילו ש Sun היתה מארגנת קורס על השוואה של מערכות Unix , אבל לא היו מדברים שם כלל על סולריס ..

סאן שלחו לי לפני מספר ימים מייל שמציע לי לקבל מהם את הספר Virtualization for dummies .. (הפצה מיוחדת לסאן) .

קיבלתי אותו בפורמט PDF .. עדיין לא הספקתי לקרוא .. אבל , אם מישהו מעוניין , הוא יכול לקבל את הספר לאחר מילוי הטופס פרטים הבא (אצלי כבר היו להם הפרטים שלי .. ) .

פשוט , אם זה מעיניין מישהו .. אד יכול להיות שכדאי לו , לפני שהם יסגרו את זה.

יום טוב

לא מזמן , בעצם כן מזמן , כתבתי פוסט על נושא של וירטואליזציה על סביבת טלפונים סלולאריים.

לפני מספר ימים , ראיתי, שאותו גוף, Open Kernel Labs הוציאו הודעה על כך שעכשיו גם אנדרואיד רץ על סביבה ווירטואלית בטלפון סלולארי ( ההודעה) .

אתמול היה אחד מהימים שהייתי צריך להוציא את הוונדליסט שבי.

באופן כללי, אני לא בעד וונדליזם אבל לעיתים צריך לעשות "בדיקת שרידות" לסביבה.

הסביבה מכילה שרתים "מבצעיים" , עובדים . אמנם עדיין יש לנו שרתים אחרים שיחליפו אותם , אבל בכל זאת .. אנחנו לא רוצים להגיע למצב של להפעיל את השרתים שנמצאים בצד.

נכון, הציעו לנו "לסמלץ" נפילה .. אבל אני לא מאמין בסימולציות כאשר זה מגיע לבדיקה אמיתית.

10 בבוקר, אבי ואני נכנסים לחוות שרתים (להלן "צוות נזק") , אבי מסתכל עליי "לנתק ?" הוא שואל ..

ואני במבט נונשלנטי עונה לו "בוודאי , אני סומך על הסביבה" .

כבל רשת ראשון ניתק, והמכונות ממשיכות לעבוד .

כבל רשת שני ניתק – והשרתים ממשיכים לעבוד.

כבל רשת שלישי ורביעי .. הולכים בעקבות הראשונים – והשרתים ממשיכים לעבוד ..

"טוב" אומר אבי .. "מה הלאה ? " , "תפיל שרת אני עונה לו" , ואבי מפיל שרת .. המכונות הווירטואליות נתפסות על ידי השרת השני ..

מחזירים את השרת הראשון לעבודה , והפעם מפילים את השני .

מפילים סוויץ' ואחר כך את השני – הסביבה ממשיכה לעבוד ..

עוברים ל Storage . "מה עושים? " אני שואל .. "הולכים על כל הקופה ? " .

"אתה לא חושש ? " שואל אבי .. "לא" אני עונה .. "בעצם כן , כי זה כבר לא תלוי בנו אלא בחומרה של HP " .. אבל לא נדע מה המצב עד שלא נעשה את זה ..

מנתקים בקר מה storage .. והסביבה ממשיכה לעבוד . מחזירים את הבקר , כל הטרמילנים מהבהבים לנו באדום .. מנתקים את השני .. ההיבהוב האדום ממשיך .. אבל הסביבה עדיין שורדת ..

אחרי 7 שעות של התעללות בסביבה , כל מה שנשאר לאבי לומר לי , זה שעל פי החיוך שיש לי על הפנים , כל מה שחסר לי עכשיו זה ללכת עם פח נפט לחדר שרתים לבדוק אם הוא ישרוד שריפה .

אז מי אמר שלא נהנים בעבודה ?

אתמול זה היה יום של וונדליזם .. היום זה יום של לקרוא את כל הפלטים והדוחו"ת כתוצאה מאותה בדיקת שרידות ..

בעוונתי הרבים, אני משתתף באחרונה גם בפרוייקט ווירטואליזציה שמטרתו להעביר סביבת עבודה שלמה של ארגון (סביבה קריטית / ארגון שמחוייב דיווח וכו') לסביבה ווירטואלית.

למעשה המטרה היא להעביר את כל סביבת השרתים, בשלב הנוכחי, להיות ווירטואלים לחלוטין. מדובר כמובן בשרתים קריטיים אשר אין מצב שהם לא יהיו פעילים. מכוון שמדובר בסביבת שרתים הטרוגנית לחלוטין (Unix, Linux,Windows, Novell ושאר מרעין בישין) אין מצב שרק חברה אחת עושה את הפרוייקט , והפרוייקט מתבצע בשיתוף פעולה של גורמים שונים .

כמובן , צריך להוסיף את הגורמים האחראים על החומרה, הגורמים האחראים בצד הלקוח .. בקיצור לנהל בלאגן , ולדאוג שגם אף אחד לא ידרוך על הרגליים של השני .

הסביבה שמקימים, למעשה נשענת על Storage מרכזי (כמובן) ובימים האחרונים , משהו לא הרגיש לי טוב מבחינת ההתנהגות של הסביבה .. זה לא שהיה משהו בולט בחריגות שלו או משהו שלא תיפקד מהותית .. הסביבה דווקא סיפקה ביצועים מעולים ביחס לתחזיות , חלקים ממנה עבדו (ועובדים) טוב יותר ממה שיצרן החומרה פרסם .. בקיצור הכל מנגן סבבה , אבל בתוך המנגינה , יש כינור אחד שמזייף .

ולכו תמצאו את הכנר המזייף כאשר לפניכם תזמורת של עשרות כנרים ונגנים .

ביום חמיש האחרון , כבודי "תפש קריזה" לקחתי את עצמי אל האתר שבו יושבת הסביבה , והתחלתי לחפור (למה להיות שם פיסית .. ובכן, על מנת לוודא שכל כבל הולך למקום שאליו הוא צריך ללכת )..  חפרתי וחפרתי , קדחתי וקדחתי .. ואכן , נמצאו כל מיני שלדים בארון אשר היה צריך לתקן אותם ..

אבל עדיין , יש כינור מזייף .

היום , מהבוקר אני בודק שוב את כל הסביבה (כל שרת לוקח כמה דקות לבדוק .. וכל סוויץ גם כן .. שלא נדבר על ה storage ) ..

בקיצור , אחרי שכבר הפכתי את כל הרכיבים .. כבר רציתי להגיע למסקנה שאולי יש פגם בכבילה .. אולי משהו אחר .. כי עדיין – משהו לא "ניגן" יפה .

בקיצור – נמצאה האבדה .. רשומה , שכרגע לא ברור מהיכן הגיעה ואשר היתה בטבלת ה arp של אחד הסוויצ'ים .. יצרה סתירה , שהולידה בעיות ואי יציבות של אחד הניתובים .

לחפש מחט בערימת שחת לפעמים קל יותר .. בקיצור .. אם יש לכם בעיה דומה – אל תשכחו את טבלאות ה arp ..

הצהרה מעניינת מאד מבית citrix , נשארתי בלי מילים .. הולך לקרוא את שוב .

טוב .. מיילים , טלפונים , וכו' .

למי שלא מכיר את המונחים , Citrix@XenServer הוא מוצר ה Enterprise של חברת Citrix לסביבות הווירטואליזציה , הכולל ממשק ידידותי , חלונאי (לא צוחק צריך חלונות בשביל ממשק הניהול) , המוצר הפך להיות בין לילה (או באמצע היום) להיות מוצר חינמי וחופשי .. עד עתה רק הרכיבים של Xen עצמו היו חופשיים אולם ממשק הניהול לא .

בנוסף לכך, סיטריקס חתמה והסדירה שותפות טובה יותר עם חברת מייקרוסופט , בעיקר על מנת לתמוך טוב יותר במכונות windows וירטואליות .. שלא תחשבו שמדובר כאן במשהו שרק סיטריקס היתה צריכה, להבנתי מייקרוסופט היתה צריכה את זה לא פחות מכוון שסביבת ה hyper V שלה לא חזקה מספיק .. (בלשון המעטה) .

בכל מקרה – יהיה מעניין .

איזה שבוע מטורף זה היה .. פשוט לא היה לי זמן לנשום, וכך מן הסתם שמו לב מי שקוראים את הבלוג שלא היה לי זמן לכתוב.

טוב אז עכשיו אחרי שאכלתי את ארוחת הצהריים של יום שלישי (כן גם לאכול לא היה לי זמן) , יש לי זמן לכתוב (בכל זאת סוף השבוע עכשיו) .

אז יש כמה דברים נחמדים יותר או נחמדים פחות שקרו לי השבוע:

1. המסמך למצע טכנולוגי של מפלגות:

יוזמה די ברוכה שכבר כתבתי עליה, אבל לצערי, התחושה שלי שהיא קצת נתקעה, הסיבה לדעתי היא שפרק הזמן שבדרך כלל הוא יותר ארוך , לפני הבחירות, היה הפעם קצר להפליא (כי התעסקו במבצע בעזה) , מה שיוצר לחץ אצל המפלגות – כוונתי ללחץ של זמן.

התוצאה היא שמרבית המפלגות , מוכנות לעסוק לטענתן בנושא של סדר יום טכנולוגי – אבל רק אחרי הבחירות, ולמעשה להבנתי , אחרי הבחירות יהיה להן תירוץ אחר .. המפלגה היחידה שעוסקת בכך היא ה"ירוקה מימד" , מה שאומר שהוא היחידה שפונה עם איזושהיא אג'נדה לקהל המשתמשים והצרכנים הטכנולוגיים , מה שמכונה לעיתים "דור האינטרנט".

2. עבודה:

כמו שכתבתי, "טחנתי עבודה השבוע" ברמות קיצוניות, בין השאר התבקשתי לסייע לחברה כלשהיא בנושא של ווירטואליזציה.

לא ממש הייתי כותב על כך, אולם על הפרק שם עמודו 2 אפשרויות, האחת היא האפשרות (המצויינת) להשתמש ב VMware והשניה כמובן היא האפשרות (הלא פחות מצויינת) להשתמש ב Xen .

מה שהיה מעניין בעיניין הזה הוא הנושא של המחיר של שני הפתרונות מחד , ביחס ליכולות של המוצרים השונים מאידך.

הסתבר לי שעל מנת ליצור מצב של זמינות גבוהה בסביבת VMware ישנה דרישה לתוספים המעלים את המחיר לרמות באמת גבוהות , מצד שני בסביבה של Xen בלי שום מוצרי צד ג' ובלי שום תוספים יקרים אפשר לכוונן מצב שבו אם שרת הווירטואליזציה נופל ה VM מייד עובר לטיפול של שרת הווירטואליזציה השני . מה שהיה נחמד מאד הוא שהאנשים הטכניים שכבר היו שם ועסקו בכך, לא ידעו שניתן לעשות זאת ללא כיבוי כלל של ה VM (לא מדובר על מצב של הזזת VM "חי" בין שרתים אלא מצב שבו שרת נופל והשרת השני משתלט על ה VM בעודו "חי" וממשיך לעבוד איתו) .

בקיצור אני ישאיר לכם לנחש איזה פתרון נבחר בסופו של דבר .

3. FreeRunner :

לפני שבוע / שבוע וחצי נחת בארץ משלוח יחסית גדול של מכשירים, כמובן שהתכוננו לכך מבעוד מועד והיו כל האישורים הנדרשים . אבל למכס תמיד יש הפתעות משלו . לאחר שפקיד המכס ראה שכל הניירת מאורגנת מראש כמו שצריך, הוא קפץ על השאלה : "אבל למטענים אין אישור" (מה שלא היה ממש נכון) .

אני באותו רגע חשבתי שאני עושה אחד משני דברים , או חונק אותו , או הורג אותו . כמובן ששני הדברים היו מובילים לאותה תוצאה  -אבל הם היו גם גורמים לי לשחרר את מה שחשתי כלפי אותו פקיד מכס .

בעיקרון הבעיה לא היתה חמורה מאד בכך שלא היו מכינים את המוקואים , אלא שמייד הבנתי שהולך להיות עיכוב בהכנסה שלהם – ואכן , עד שהנושא טופל ע"י מכון התקנים , והמכס קיבל אישור לכך שהאישור שהיה מוכן מראש הוא תקף , חלף לו כמעט שבוע (בכל זאת כנראה אנשי המכס או אנשי מכון התקנים הולכים ב 14:00 הביתה ) , וכך באמצעות בירוקרטיה , כל המשלוח עוכב במכס ..

לא סוף העולם , אך בוודאי לא נעים ומצריך טיפול שלא ממש יכלתי לעשות , כי כאמור הייתי עסוק במליון דברים אחרים .

אבל, סוף טוב הכל טוב, יום חמישי בערב , הגיע אחר כבוד המשלוח והוא נח לו עכשיו את מנוחת השבת בתוך ערימת ארגזים (ואני מקווה להתחיל להתעסק בכך מחר או מחרתיים, כלומר לטפל בשילוח לאלו שהזמינו וכו').

תוספת:

קיבלתי כמה מיילים בסגנון של "לא יכול להיות". אז הנה ארגז אחד מתוך המשלוח:

אני חושב שלא יצא לי לכתוב קצת זמן על הספקים הגדולים, ובדרך כלל כידוע, אני מעדיף להקניט, להרגיז ובדרך כלל גם לרדת על החלטות שלהם – מהטעם הפשוט שבדרך כלל הדאגה העיקרית של חברות גדולות היא לעצמן, וזה שהן מפרסמות כל מיני דברים שלכאורה עושים טוב לצרכנים – לא באמת אומר שזה המצב בפועל (כלומר אנחנו כצרכנים בדרך כלל כן נפגעים בצורה כזו או אחרת .. ) .

אבל , כידוע, יש מידי פעם גם דברים טובים לומר על חברות גדולות , וצריך גם אותם לומר ..

הפעם על הפרק .. Oracle ..

הענקית הזו, מצליחה להוכיח שיש לה מדיניות קוד פתוח ותוכנה חופשית סדורה ומסודרת, כלומר, למרות שלכאורה היו רגעים שהיה נראה שאורקל מסתערת בלי לבדוק על מה .. מסתבר שבודקים שם לעומק את הדברים והם מתחילים להזכיר בצורת ההתנהלות שלהם את IBM .. שזה , כמישהו שמתבונן מהצד , אמור להיות מחמאה ..

הכוונה היא שהם לא עושים או מנסים להיות "אינידאנים" מצד אחד ולקפוץ על דברים מפוקפקים , ומאידך הם כן מצליחים לנהל מדיניות של עבודה עם קוד פתוח במקביל לקוד קינייני (כלומר לחברה יש מוצרים חופשיים מחד וקיניינים מאידך).

לפני כשנתיים לערך הכריזה אורקל על הפצת לינוקס משלה, הפצה שזכתה בתחילה לביקורת מסויימת בגלל היותה מבוססת על RHEL אולם מלכתחילה הודיעה אורקל כי בסופו של דבר זו תהיה הפצה עצמאית , ואכן לאורך הזמן ניתן לראות שאורקל מוסיפה יותר ויותר כלים שונים להפצה שלה (חלקם מגיעים בהפצה עצמה וחלקם ניתן להוסיף) כמו לדוגמה ההסבה של מערכת ה YaST לפלטפורמה מבוססת RHEL , כנראה שלשיטת אורקל נדרש כלי מרכזי שיעשה את החיים אולי נוחים יותר לחלק מהאנשים והם מבחינה זו נתנו מענה לכך.

אולם, לא רק בלינוקס עצמה כמערכת הפעלה עוסקת אורקל, אחת הדילמות שקיימות כאשר חברה נכנסת לעסוק בתוכנה חופשית, היא מה היחס של אותה חברה לתוכנה חופשית שמתחרה במוצרים שלה – כלומר אורקל יכולה לעודד שימוש בלינוקס כמערכת הפעלה, אך מה יהיה היחס של אורקל כאשר נתחיל לדבר על בסיסי נתונים חופשיים ?

צריכה האמת להאמר שלשאלה הזו הגיע תשובה ממקור לא צפוי , מלארי אליסון עצמו, כאשר הוא היה בארץ הוא נשאל ממש על נקודה זו , התשובה שלו (למרבית הפלא) לא היתה מתחמקת אלא ישירה ובהירה , “מי שמתאים לו MySQL שישתמש ב MySQL , אולם כאשר בסיס הנתונים שלו יגדל והצרכים שלו יגדלו , הוא מן הסתם ירצה לעבור לאורקל" (כמובן הציטוט אינו מדוייק ונשען על זיכרוני), תשובה שבספק אם היה ניתן לקבל אותה מדרגים אחרים בחברה כלשהיא ..

אולם, אורקל המשיכה במדיניות של שימוש בתוכנה חופשית, בכל מקום שבו היא חשבה שזה יכול לסייע ללקוחות שלה, והשלב הבא בתהליך היה שימוש בוירטואליזציה . אורקל למעשה הוציאה פלטפורמת וירטואליזציה , אשר מבוססת על המנוע של Xen ואשר מגיע ללקוח כמערכת להתקנה ישרות על הברזלים , בנוסף לכלים הבסיסיים שקיימים על מערכת זו (הכוונה היא לכלי ניהול) , אורקל החלה לספק מערכת ניהול לסביבה זו , מערכת שמבוססת (או נגזרת) ממערכות ניהול הלינוקסים שלה (שהיא עצמה נגזרת ממערכת ניהול ה grid ) [זאת למיטב זכרוני] . ארגונים היו יכולים לרכוש את מערכת הניהול הזו בפני עצמה לחלופין הם היו יכולים לקבל אותה בחינם במידה והם היו לקוחות לינוקס של אורקל או שהיות לקוחות שהיתה להם מערכת גריד של אורקל (או כל מיני הגדרות אחרות של לקוחות אורקל) .

לאורך השנה / שנה וחצי האחרונות, אורקל העמיקה את הטיפול שלה בפלטפורמת הווירטואליזציה ומן הסתם העמיקה את הקשר שלה לפרוייקט Xen , כאשר היא מסייעת בתיקונים שיפורים וכיוצ"ב .

לפני מספר ימים יצאה ההודעה הזו, אשר מדברת על העמקה נוספת (או הסדרה של הקשר הקיים ממילא ) של אורקל עם Xen .. שורה תחתונה , אורקל הופכת דה-פאקטו להיות שחקן תשתיתי מוביל גם בתחומים של ווירטואליזציה, מערכות הפעלה וכו' (בלי קשר להיותה שחקן מהותי בתחומים עליהם היא אמונה ממילא) כאשר היא מאמצת גישה של שימוש בתוכנה חופשית וקוד פתוח ..

לאנשים העובדים בצורה מקצועית בתחום , מומלץ שלא להסיר עיניים ממה שקורה באורקל בכל הנושאים הללו – על מנת לספק , כאשר יש צורך, אופציה נוספת לארגון בו אתם עובדים .

]]> http://ofek.biz/blog/archives/584/feed 9