מערכת לcrawling של אתר עם יכולות HTTPS ו-CAPTCHA פשוט

אני מעוניין באיסוף מידע מאתר שמבקש בתחילה קפצ'ה, מאפשר הזנה של מאפיינים לבחירה ואז מחולל נתונים בהתם לבקשה, כל זאת נעשה ב-HTTPS.

המערכת צריכה לאסוף את הנתונים האלה מהאתר הנ"ל באמצעות crawler (יש ברשותי אחד מתוחכם מאוד שיכול להועיל, כתוב ב-C#)

השלבים:
* ניתוח ה-Captcha - למרות שהוא די בסיסי וישנם כלים שיכולים לעבור אותו
* המידע עובר ב-HTTPS - לא אמור להוות בעיה כי מן הסתם אנו יוזמים את הבקשה
* מאפיינים שצריך להעביר ב-POST
* שמירת הדף לפיענוח באמצעות XPATH

המערכת תעבוד מול אתר אחד כיום ולכן היא יכולה להיות ספציפית לגביה, המגבלות אופיינו כאן.