این یک برنامه لینوکس به نام Scrapy است که آخرین نسخه آن را می‌توانید با عنوان 2.13.3sourcecode.tar.gz دانلود کنید. می‌توان آن را به صورت آنلاین در ارائه دهنده میزبانی وب رایگان OnWorks برای ایستگاه‌های کاری اجرا کرد.
این اپلیکیشن با نام Scrapy را با OnWorks به صورت آنلاین دانلود و اجرا کنید.
برای اجرای این برنامه این دستورالعمل ها را دنبال کنید:
- 1. این برنامه را در رایانه شخصی خود دانلود کنید.
- 2. در فایل منیجر ما https://www.onworks.net/myfiles.php?username=XXXXX نام کاربری مورد نظر خود را وارد کنید.
- 3. این برنامه را در چنین فایل منیجر آپلود کنید.
- 4. OnWorks Linux آنلاین یا شبیه ساز آنلاین ویندوز یا شبیه ساز آنلاین MACOS را از این وب سایت راه اندازی کنید.
- 5. از سیستم عامل لینوکس OnWorks که به تازگی راه اندازی کرده اید، به مدیر فایل ما https://www.onworks.net/myfiles.php?username=XXXXX با نام کاربری که می خواهید بروید.
- 6. اپلیکیشن را دانلود کرده، نصب و اجرا کنید.
عکس ها
Ad
تراشیدن
شرح
Scrapy یک چارچوب سریع، منبع باز و سطح بالا برای خزیدن وب سایت ها و استخراج داده های ساختار یافته از این وب سایت ها است. قابل حمل و نوشته شده در پایتون، می تواند بر روی ویندوز، لینوکس، macOS و BSD اجرا شود.
Scrapy قدرتمند، سریع و ساده است و همچنین به راحتی قابل توسعه است. به سادگی قوانین را برای استخراج داده ها بنویسید و در صورت تمایل بدون نیاز به لمس هسته، عملکرد جدیدی اضافه کنید. Scrapy بقیه کارها را انجام می دهد و می تواند در تعدادی از برنامه ها استفاده شود. می توان از آن برای داده کاوی، نظارت و تست خودکار استفاده کرد.
امکانات
- پشتیبانی داخلی برای انتخاب و استخراج داده ها از منابع HTML/XML از طریق عبارات توسعه یافته XPath و انتخابگرهای CSS، با روش های کمکی برای استخراج با استفاده از عبارات منظم
- کنسول پوسته تعاملی برای استفاده از عبارات CSS و XPath برای خراش دادن داده ها
- پشتیبانی داخلی برای تولید صادرات فید در چندین فرمت مختلف (JSON، XML، CSV) و ذخیره سازی آنها در backendهای مختلف (S3، FTP، سیستم فایل محلی)
- پشتیبانی از رمزگذاری و تشخیص خودکار
- پشتیبانی از توسعه پذیری قوی
- تعداد زیادی افزونه داخلی و میان افزار برای کوکی ها و مدیریت جلسه، robots.txt، محدودیت عمق خزیدن و موارد دیگر
- کنسول Telnet برای اتصال به کنسول پایتون که در فرآیند Scrapy شما اجرا می شود
- عنکبوت های قابل استفاده مجدد، خط لوله رسانه، حل کننده DNS کش و موارد دیگر
زبان برنامه نویسی
پــایتــون
دسته بندی ها
این برنامه ای است که می توان آن را از https://sourceforge.net/projects/scrapy.mirror/ نیز دریافت کرد. در OnWorks میزبانی شده است تا به آسانی از یکی از سیستم عامل های رایگان ما به صورت آنلاین اجرا شود.
