پیدا کردن لینک های مخفی سایت

سلام و عرض ادب و احترام بر مهندس کیاء عزیز ، اساسا ابزارها همشون میتونن لینک های یک وب سایت رو ببینند و این ما هستیم که اونها رو مخفی فرض می کنیم و ابزار سورس کدهارو آنالیز می کنه و داخلشون جستجو می کنه و ما هستیم که صفحه رو میبینیم ... بنابراین شما با اکثر ابزارهای تحلیل وب می تونید لینک های مخفی رو شناسایی کنید ، برای مثال با ابزاری مثل Screaming Frog SEO Spider زیر و بم یک صفحه یا یک وب سایت رو می تونید تحلیل کنید. طبیعتا اینکار با Web Scraping قابل انجام هست. حالا دقیق نمیدونم برای چه کاری نیاز دارید تا بتونم راهنماییتونم کنم.