نوشتن یک Crawler یا خزنده اینترنتی
با سلام ووقت بخیر دوستان میخواستم بپرسم برای درست کردن یک خزنده (craweler)چه دوره ای را باید بگذرانیم؟من میخوام برای سایتم یک خزنده که بتونه اطلاعات قیمتی رو از سایت های متلف بگیره وبروز نگهداره با استفاده از پیتون برنامه نویسی کنم لطفا دوستانی که اشنایی دارن راهنمایی کنن.واگه تو این سایت محصول خاصی برای اموزش هست لینکشو لطفا قرار بدید با تشکر.
1 پاسخ
سلام ، خوش اومدید ، اینکه هیچ دیدی به برنامه نویسی ندارید قطعا براتون مشکل ساز میشه ، طبیعتا شما باید الگوهای این نوع کدنویسی رو پیدا کنید و ازشون تو برنامتون استفاده کنید ، من نمیتونم زیاد کمکتون کنم مگر اینکه بگم دانش برنامه نویسیتون رو بالا ببرید ! قرار نیست الزاما برنامه ای که می نویسید پایتون باشه یا سی شارپ یا جاوا پس قطعا جواب قطعی هم نداره که میخام این رو بنویسم چی یاد بگیرم ! خوب هر کسی باشه اول جواب میده برنامه نویسی یاد بگیرید ! نمیشه گفت من فقط میخام برنامه انبارداری بنویسم و دیگه چیز دیگه ای مثلا برنامه نویسی نیاز ندارم ! مثلا نمونه کد زیر کد پایتون یک کراولر ساده هست :
https://scrapy.org/
حالا شما برنامه نویسی بلد باشید می تونید این سورس کد رو بگیرید و Custom اش کنید