מה המצב

איך מתמודדים עם כמות ענקית של נתונים

לדוגמה

איך אתר כמו פייסבוק שומר את הנתונים שלו ( איך הטבלאות מסודרות )

ושולף אותם כל כך מהר

שאלה שניה

איך מתמודדים עם מיליון משתשים באתר

תודה

ציינתי בכותרת שמדובר במענה חלקי, על מנת לא להטעות, וכדאי שאכן תתייחס לזה כאל מענה חלקי, ותזכור שיתכן וישנן פתרונות טובים יותר.

ראשית, ישנן מסדי נתונים רבים, רבים מהם טובים, אך גם הטובים שבהם, בהחלט לא תמיד מתאימים למספר רב של רשומות (ובהגדרה "מספר רב של רשומות" אין הכוונה לאלפי, עשרות או אף מאות אלפי רשומות, אלא בד"כ ללפחות מליוני, עשרות מליוני רשומות ויותר).

שנית, למסדי נתונים שונים, יש טכניקות שונות שמיועדות לניהול מסדי נתונים "גדולים", תחזוק וניהול של רשומות רבות, להבדיל מטכניקת השימוש הבסיסי שהיא אולי קלה יותר לשימוש ומימוש, אך לא בהכרח יעילה יותר [ולכן מתאימה לתחזוק וניהול מספר מועט של רשומות, לפי שקלולים שונים כגון זמן ועלות כספית מול התמורה המתקבלת].
לשרת מסד הנתונים לדוגמה, יש מנוע מסד נתונים בשם InnoDB, המיועד למסדי נתונים "גדולים", להבדיל מהמנוע MyISAM שאולי מתקדם אך פשוט יותר, ולא מתאים במידה זהה להתמודדות עם מליארדי רשומות.

ישראל K, איזה לינק ניסית לשים ל innoDB?

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/list.png]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/?https://2010-uploaded.fresh.co.il/2010/09/21/52868411.gif,http://www.boredpanda.com/blog/wp-content/themes/mimbo2.2/images/subscribe-panda-605px.png]

תוקן, תודה

אם אני בונה אתר שהציפיה היא מיליון אנשים
אז עדיף לי DB של InnoDB מההתחלה
או שאפשר לשנות את זה בהמשך??
איפה אני רואה עם איזה מנוע אני משתמש??

השאלה היא מה יחס הקריאה/כתיבה מה DB

ל MyISAM יש לא מעט יתרונות בציקלונו; ואם עיקר הפעולות באתר הוא קריאה בלבד, והכתיבה היא שולית, אין ל InnoDB יותר מדי יתרון - ויש לו גם חסרונות - בזבוז של הרבה יותר מקום עבור אותו מידע, אי תמיכה ב FULLTEXT, ועוד...

אפשר גם לעשות "שילוב מנצח" - "לשפוך" את המידע החדש שנכנס למערכת לטבלת InnoDB, ו"פעם בכמה זמן", לשפוך את התוכן של טבלת ה InnoDB לטבלת MyISAM בטראנזקציה בודדת. שוב, לעתים זה לא ריאלי מבחינה אפליקטיבית (למשל אתר אינטרנט שעדכונים בו חייבים להופיע מיד), אבל לא מעט פעמים זה כן: לדוגמא מערכת תגובה לכתבות: לאף אחד לא ממש משנה אם תגובה שמישהו כתב תופיע מיד או דקה או מספר דקות לאחר מכן...

נמאס לכם לזכור סיסמאות? לחצו כאן!

זה האתר שאני בונה

www.new.cananybody.com

אני מאמין שתהיה הרבה כתיבה, לא כל חצי שניה אלף שורות כמו ברשתות חברתיות
אבל זה אתר שמקשר ביו אנשים אז חייב להיות כתיבה ברמה מסויימת