כל הפרויקטים

סקרייפר קטלוג מלא של KSP.co.il

סקרייפר curl_cffi + browser-impersonation שמוריד את הקטלוג המלא של KSP ל-JSON + CSV ידידותי ל-Excel.

האתגר

requests.get(...) מחזיר ריק/חסום כי KSP עם TLS fingerprinting.

הפתרון

סקריפט Python יחיד (fetch_ksp_all.py) שמשכפל את ה-SSE endpoint של KSP דרך curl_cffi (impersonation של Chrome), עובר דף-דף ב-50 דרך category path של 15 רמות, וכותב גם ksp_all_items.json וגם CSV ידידותי ל-Excel. ksp_to_csv.py post-processor ממיר JSON בלי re-scraping.

תוצאות

50

גודל דף

JSON + CSV (UTF-8 BOM)

פלטים

KSP.co.il full catalog

יעד