Udemy – Automate Web Scraping Using Python Scripts and Spiders 2021-6
Automate Web Scraping Using Python Scripts and Spiders، دوره آموزش وب اسکریپ با استفاده از اسکریپتهای پایتون و Spiders بهطور خودکار توسط آکادمی یودمی منتشر شده است. Web scraping فرآیند دانلود خودکار داده های یک صفحه وب و استخراج اطلاعات خاص از آن است. اطلاعات استخراج شده را می توان در یک پایگاه داده یا به صورت انواع مختلف فایل ذخیره کرد. ابزارهای محبوب اسکریپ کردن وب عبارتند از BeautifulSoup و Scrapy. BeautifulSoup یک کتابخانه پایتون برای استخراج داده ها (تجزیه) از فایل های HTML و XML است. Scrapy یک چارچوب برنامه منبع باز رایگان است که برای خزیدن وب سایت ها و استخراج داده های ساخت یافته استفاده می شود که می تواند برای موارد مختلفی مانند داده کاوی، تحقیق، فرآیند اطلاعات یا آرشیو تاریخی استفاده شود. ابزارهای نرم افزار اسکریپ وب ممکن است مستقیماً با استفاده از پروتکل انتقال ابرمتن یا از طریق مرورگر وب به وب جهانی دسترسی پیدا کنند.