אני בונה מערכת סטטיסטיקה למספר רב של אתרים, או בפשטות מונה מבקרים.
אני עובד עם mySql

אני לא בטוח איך לחלק את העומס בין הטבלאות, ואני אפרט.
הטבלה המרכזית מכילה את המבקרים שמכיל אינדקס - id ו- timestamp של השעה הנוכחית int(10)

ברצוני להתרכז בזמן - שעה, יום, שבוע, חודש ושנה.
כמו-כן אני מעדיף לשמור כמה שיותר זמן את המבקרים אבל אני לא בטוח איפה לשים את הגבול.


אני מתלבט בבניית הצגת הנתונים (יום, שבוע\חודש ושנה):
1. להציג ע"י group by כשמישהו מבקש לראות את הנתונים.
+ כשמבקר נכנס מופעלת רק שאילתא אחת (INSERT)
- בהצגת הסטטיסטיקה מופעלת מספר שאילתות של group by על אותה טבלה מסכנה
~ או שאני יכול ליצור פחות שאילתות ולבקש את הרשומות כמו שהן, שכנראה יגיעו בהמוניהן (עד שנה אמרנו, לא?), ולעבד אותן ב PHP.

2. ליצור טבלה נוספת לסטטיסטיקה עם רשומה לשעה, ליום, לחודש ולשנה.
- כשמבקר נכנס מופעלות עוד שאילתות לעדכון\יצירה של התאריך..
~ או עוד אופציה לעבד את הנתונים כשאני רוצה לצפות בסטטיסטיקה או דרך CRON JOB
+ בהצגת הסטטיסטיקה אני צריך לקרוא מספר מצומצם של רשומות בלי פונקציות
- ומכיוון שיש לי מספר רב של אתרים אז הטבלה הזאת תתחיל לתפוח לא מעט
24*30*12*10000 שעות*ימים*חודשים*שנים*אתרים
גם בטבלה זו אני ארצה לשמור כמה שיותר זמן מהסטטיסטיקה


כמובן שאני יכול גם לשלב ביניהם אבל אני לא יודע מה השיקול שלי.
טבלאות עמוסות \ פחות שאילתות
שאת עיקר העומס אני רוצה להוריד מהמבקרים.

אני מקוה שהצלחת להציג נכון
מה דעתכם?

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/list.png]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/?https://2010-uploaded.fresh.co.il/2010/09/21/52868411.gif,http://www.boredpanda.com/blog/wp-content/themes/mimbo2.2/images/subscribe-panda-605px.png]

יאו ערן, אתה חי ? כמה זמן לא התראנו ... השתחררת ?

ולשאלתך .. זה תלוי אם אין לך מגבלה של תעבורה (נפח גודל של מסד נתונים) אז הייתי הולך על האפשרות הראשונה ושהיא גם הפשוטה יותר, אבל אני לא בטוח איזה פעולה תיהיה לך יותר יעילה ... קו המחשבה שלך הוא נכון עדיפות למבקרי האתר.
מה שאני הייתי עושה, זה הולך על 2 האפשרויות מחשב את היעילות שלהם (כולל זמן ריצה) ואז משווא, וזה כמובן עם כך שהטבלאות שלך מפוצצות במידע ..

אני חושב אבל אני לא בטוח שאם המסד נתונים מפוצץ אז יקח יותר זמן לשאילתה לרוץ ולאסוף את כל המידע.
אבל אם המסד מחולק לכמה חלקים כאשר אתה יודע לנווט בין חלק לחלק אז הזמן ריצה קטן יותר כי אין צורך לסרוק את כל הערכים אתה פשוט מפנה לחלק שצריך ..
אני הייתי הולך על פריסה של הטבלאות ועבודה עם כמה שאלתות

אין לי מגבלה. השרת (אין לי יותר מדי מושג איזה דרישות יתאימו) אמור להיות מותאם לסקריפט ולפופלריות אם תהיה ואני רוצה ליצור משהו קצר יעיל ואפקטיבי.


מה הכוונה לחלק את המסד לכמה חלקים?
ליצור את הטבלה של המבקרים מספר פעמים לפי אתרים כדי שיהיה בה פחות עומס?


הקטע בטבלה נוספת מצמצם לי כל פעם שלב אחד למעלה ב group by שאת המינימום של השעות אני חייב לשמור וכך הגעתי לחישוב הזה -->> 24*30*12*10000 שעות*ימים*חודשים*שנים*אתרים
מהחישוב הזה אפשר להוריד את הימים, חודשים ושנים אם אני משתמש ב group by עבורם.
זה השילוב שחשבתי שיתאים לי.

מכיוון שהכל בתיאוריה אצלי, אני רוצה לודא שיהיה לי שרת מתאים ושהסקריפט מתומצת מספיק.

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/list.png]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/?https://2010-uploaded.fresh.co.il/2010/09/21/52868411.gif,http://www.boredpanda.com/blog/wp-content/themes/mimbo2.2/images/subscribe-panda-605px.png]

לעשות index על ה timestamp

להשתמש ב LIMIT בין שני ערכי timestamp שיווצרו בשפת צד השרת (לדוגמא, ב PHP על ידי הפונקציה mktime)...

זה בהנחה שאתה בכלל רוצה לשמור את כל זמני הביקורים. אם אתה סתם רוצה ליצור מונה, אזי טבלה עם siteid ו visitors כאשר אתה בכל פעם עושה update tbl set vistors=visitors+1 where siteid = X יהיה הרבה יותר יעיל...

נמאס לכם לזכור סיסמאות? לחצו כאן!

אז אתה בעצם אומר לבקש את כל הרשומות?
LIMIT או WHERE ?

הצד הפחות חיובי בעניין הזה שמבקרים של שנה שלמה יכול להגיע למספר עצום של רשומות לאתר.
שזה האידאל שלי, אני רק לא יודע אם זה יכול להיות מעשי.

אם אני לא שומר את הנתונים המוצגים זה ידרוש ממני לשמור את כל הרשומות של שנה אחורה או כמה שאני רוצה להציג ול'ספור מחדש', גם אם הן ישנות ביותר.
העומס יגרום לי לחתוך בנתוניםו\או להציג נתונים רק מחודשים ולא שנים עברו.

לכן נראה לי לעדכן נתונים בטבלה הנוספת ולהחזיק את הטבלה של המבקרים רק כדי לקחת באופן דינמי מבקרים בשעות אחרונות של היום.


האם יהיה נכון לחלק אותה כמו שהוצע כאן?

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/list.png]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/?https://2010-uploaded.fresh.co.il/2010/09/21/52868411.gif,http://www.boredpanda.com/blog/wp-content/themes/mimbo2.2/images/subscribe-panda-605px.png]

שוב, זה תלוי במה דרוש לך, ואיפה פחות אכפת לך להעמיס ..

ספירה מחדש של הרשומות בכל תצוגה של המונה זה הדבר הכי טפשי שאפשר לעשות, לא משנה מה...

אם אתה רוצה לשמור את כל הביקורים - תעשה טבלה לביקורים. אם אתה רוצה לשמור את כמות הכניסות - שמור טבלת כניסות. אם אתה רוצה את שתיהן, שמור שתי טבלאות. המידע הנוסף של מספר הכניסות הוא שולי מבחינת תפיסת מקום...

חוץ מזה, שאתה לא רוצה לנעול טבלאות בכל סריקה של מספרי הכניסות על טבלה ענקית...

נמאס לכם לזכור סיסמאות? לחצו כאן!

סבבה, זה מה שרציתי לשמוע :]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/list.png]

[התמונה הבאה מגיעה מקישור שלא מתחיל ב https ולכן לא הוטמעה בדף כדי לשמור על https תקין: http://fresh.clanteam.com/?https://2010-uploaded.fresh.co.il/2010/09/21/52868411.gif,http://www.boredpanda.com/blog/wp-content/themes/mimbo2.2/images/subscribe-panda-605px.png]