مطالب مرتبط با «how to scrape a website python» در php مرکز کد های سایت | نویسنده: استخدام کار
how to scrape ajax page using php
سلام.برای scrape کردن سایت هایی که محتوایات صفحه با ajax لود می شود ، مشکل دارم. ابتدا سایت رو Inspect می کنم و برای XHR فیلتر می کنم. پارامتر ها هم مشخص است. ولی وقتی scrape می کنم محتویات صفحه یک با مثلا 5 برابر است.لطفا راهنماییfunction curlPost($postUrl, $postFields) {$ch = curl_init(); // Initialising cURL session// Setting cURL optionscurl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE); // Prevent cURL from verifying SSL certificatecurl_setopt($ch, CURLOPT_CUSTOMREQUEST, "POST"); // methodcurl_setopt($ch, CURLOPT_FAILONERROR, TRUE); // Script should fail silently on error// curl_setopt($ch, CURLOPT_COOKIESESSION, TRUE); // Use cookiescurl_setopt($ch, CURLOPT_FOLLOWLOCATION, TRUE); // Follo...
ادامه مطلب
