دوره crawl(خزش در وب)با پایتون-قسمت 4



سلام. این قسمت ادامه ی قسمت قبلی هست که با سلنیوم انجام دادیم! اما توی این قسمت اومدیم گفتیم چطوری بدون سلنیوم از راه سخت تر سایت های ایجکسی رو کرال کنیم!

چرا؟

اول اینکه سلنیوم رم زیادی مصرف میکنه!

دوم اینکه از هیچ لحاظی بهینه نیست...

مثلا طول میکشه تا وب درایور لود بشه و شروع به کار بکنه!

حتی ممکنه خیلی وقتا کراش کنه!

در آخر اینکه ما یه قسمت کوچیک از سایتو ممکنه لازم داشته باشیم اما سلنیوم که باز میشه بقیه المنت ها و سورس های دیگه رو هم لود میکنه!

یا شاید اصلا دلمون نخاد سلنیوم استفاده کنیم....توی این قسمت توضیح دادیم که چطور بدون سلنیوم کار قسمت قبلیو انجام بدیم.

اگر نظر یا پیشنهادی هست کامنت بذارین:)

https://www.aparat.com/v/0wUc8