
23-05-2009, 21:02
|
|
|
|
חבר מתאריך: 19.03.06
הודעות: 5,377
|
|
|
הורדת דפי אינטרנט בפייתון
אני מנסה לכתוב סקריפט שיוכל להוריד דפים מהאינטרנט (HTML).
מצאתי שניתן לעשות זאת באמצעות שימוש ב-urllib2 כך:
קוד:
data=urllib2.urlopen(url)
אמנם הדבר עובד כמו שצריך, אך במידה וארצה להוריד מספר רב של דפים, הוא אינו יעיל בכלל משום שהוא יוצר את החיבור כל פעם מחדש.
אמרו לי להשתמש בסוקטים, אבל הבעיה היא שהסוקט יעיל אך ורק במידה והסרבר
שולח את הדפים, אבל במקרה הזה הוא רק מאחסן אותם.. יכול להיות שאני טועה,
ואשמח לקבל הכוונה אם מישהו יודע.
תודה.
_____________________________________
|