پوریا توانا
پوریا توانا
خواندن ۱ دقیقه·۱ سال پیش

DailyFx Crawler


سلام به همه دوستان

راستش چند وقت پیش ی script واسه crawl کردن وبسایت DailyFx(دوستانی که تو بازارهای مالی خارجی کار می کنند احتمالا آشنا هستندبا این سایت، اگرم نیستید عب نداره، ی تقویم اقتصادیه، این لینک برید تو احتمالا میفهمید چی به چیه DailyFx) نوشته بودم، امروز بعد مدتی اومدم دوباره استفاده کنم دیدم المان های(Elements) وبسایت تغییر کرده و کد قبلی کار نمی کنده دیگه! این شد که تصمیم گرفتم بصورت پیوسته سورس کد ورژن اولیه رو آپدیت کنم متناسب با سایت و تو ورژن کنترل گیت قرار بدمش شاید بدرد کسی خورد :)

بطور خلاصه هم بخوام بگم چیکار می کنه اینطوریه که با کتابخونه selenium پاپتون و chromewebdriver مرورگر کروم میاد و خبرهای هفته آینده با درجه اهمیت متوسط و زیاد رو داخل ی فایل csv ذخیره می کنه(پیشنهاد میشه واسه اینکه دیتایی از دست ندید این script رو قبل از شروع هفته میلادی یعنی شنبه/ی شنبه ران کنید) و بعدش می تونید این فایل رو داخل google calendar خودتون اپلود(صادر) کنید لذتشو ببرید!:)


crawler
مهندس کامپیوتر( نرم افزار ). فول استک دولوپر( جنگو ـ ریکت ). علاقه مندبه بازارهای مالی( به جز بورس:( )
شاید از این پست‌ها خوشتان بیاید