دوره آموزشی Web Scraping با پایتون

مربی Ryan Mitchell روش web scraping را با استفاده از زبان برنامه نویسی پایتون آموزش می‌دهد. او به شما کمک می‌کند بفهمید که یک انسان در حال مرور وب با یک web scraper متفاوت است. وی ابزارهای توسعه دهنده Chrome و نحوه استفاده از آنها برای بررسی تماس‌های شبکه را معرفی می‌کند. او به شما نحوه نصب Scrapy با pip و نحوه نوشتن چند کد `Hello، World` برای scrape یک صفحه وب ساده را به شما نشان می‌دهد. وی نحوه استفاده از Scrapy LinkExtractor را برای یافتن پیوندهای داخلی در یک صفحه وب ارائه می‌دهد، سپس نحوه پیکربندی Scrapy و ItemPipeline را برای نوشتن داده‌ها در قالب‌های مختلف فایل نشان می‌دهد. او بهترین روش‌ها را برای سازماندهی پروژه‌های شما، نوشتن تجزیه کننده‌های قابل استفاده مجدد و اثبات آینده spiders‌ها به شما معرفی می‌کند. وی نحوه کارکرد API‌ها و نحوه استفاده از آنها برای بازیابی مستقیم داده‌ها را توضیح می‌دهد. او headers‌ها و کوکی‌ها را جستجو می‌کند، سپس به اتوماسیون مرورگر و نحوه ادغام Selenium با Scrapy می‌پردازد. در پایان، او ایده‌هایی برای ادامه تحصیل در علوم کامپیوتر و تفکر خلاقانه در مورد اتوماسیون ارائه می‌دهد.