🔥 کمپین سال عزتتا پایان اردیبهشت ادامه دارد (در این روزهای سخت در کنار شما هستیم)
۰ ثانیه
۰ دقیقه
۰ ساعت
۱ نوید احمدزاده
Cors Policy and web scraping
جامعه پی اچ پی ایجاد شده در ۲۷ اسفند ۱۴۰۴

آیا با استفاده از Cors Policy میشود از web scaraping جلوگیری کرد ؟

CORS Policy نمی‌تواند از web scraping جلوگیری کند. CORS فقط در مرورگرها اعمال می‌شود و برای محافظت از کاربران در برابر درخواست‌های cross-origin طراحی شده است و Web scrapers معمولاً از ابزارهایی مثل cURL، Python (requests/BeautifulSoup)، Puppeteer استفاده می‌کنند و به صورت مستقیماً به سرور شما درخواست می‌زنند.

 

راه‌های جلوگیری از scraping:

Rate limiting - محدود کردن تعداد درخواست‌ها از یک IP
User-Agent filtering - بلاک کردن bot user-agents
CAPTCHA - برای درخواست‌های مشکوک
IP blocking - بلاک کردن IP‌های مشکوک
Honeypot traps - لینک‌های مخفی برای شناسایی bot‌ها
WAF (Web Application Firewall) - مثل Cloudflare یا ابرآروان

علی منظور ۰۹ اردیبهشت ۱۴۰۵، ۰۶:۴۲