ນີ້ແມ່ນແອັບ Linux ທີ່ມີຊື່ວ່າ pyspider ເຊິ່ງລຸ້ນຫຼ້າສຸດສາມາດດາວໂຫຼດໄດ້ເປັນ v0.3.10.zip. ມັນສາມາດດໍາເນີນການອອນໄລນ໌ຢູ່ໃນຜູ້ໃຫ້ບໍລິການໂຮດຕິ້ງຟຣີ OnWorks ສໍາລັບສະຖານີເຮັດວຽກ.
ດາວນ໌ໂຫລດແລະດໍາເນີນການອອນໄລນ໌ app ນີ້ມີຊື່ pyspider ກັບ OnWorks ໄດ້ຟຣີ.
ປະຕິບັດຕາມຄໍາແນະນໍາເຫຼົ່ານີ້ເພື່ອດໍາເນີນການ app ນີ້:
- 1. ດາວໂຫຼດຄໍາຮ້ອງສະຫມັກນີ້ໃນ PC ຂອງທ່ານ.
- 2. ໃສ່ໃນຕົວຈັດການໄຟລ໌ຂອງພວກເຮົາ https://www.onworks.net/myfiles.php?username=XXXXX ດ້ວຍຊື່ຜູ້ໃຊ້ທີ່ທ່ານຕ້ອງການ.
- 3. ອັບໂຫລດແອັບພລິເຄຊັນນີ້ຢູ່ໃນຕົວຈັດການໄຟລ໌ດັ່ງກ່າວ.
- 4. ເລີ່ມ OnWorks Linux ອອນລາຍ ຫຼື Windows online emulator ຫຼື MACOS online emulator ຈາກເວັບໄຊທ໌ນີ້.
- 5. ຈາກ OnWorks Linux OS ທີ່ເຈົ້າຫາກໍ່ເລີ່ມຕົ້ນ, ໄປທີ່ຕົວຈັດການໄຟລ໌ຂອງພວກເຮົາ https://www.onworks.net/myfiles.php?username=XXXXX ດ້ວຍຊື່ຜູ້ໃຊ້ທີ່ທ່ານຕ້ອງການ.
- 6. ດາວນ໌ໂຫລດຄໍາຮ້ອງສະຫມັກ, ຕິດຕັ້ງມັນແລະດໍາເນີນການ.
ໜ້າ ຈໍ
Ad
pyspider
ລາຍລະອຽດ
pyspider ເປັນລະບົບ Spider (Web Crawler) ທີ່ມີປະສິດທິພາບໃນ Python. ອົງປະກອບແມ່ນເຊື່ອມຕໍ່ໂດຍແຖວຂໍ້ຄວາມ. ທຸກໆອົງປະກອບ, ລວມທັງແຖວຂໍ້ຄວາມ, ແມ່ນແລ່ນຢູ່ໃນຂະບວນການ / ກະທູ້ຂອງຕົນເອງ, ແລະສາມາດທົດແທນໄດ້. ນັ້ນຫມາຍຄວາມວ່າ, ໃນເວລາທີ່ຂະບວນການຊ້າ, ທ່ານສາມາດມີຫຼາຍຕົວຢ່າງຂອງໂປເຊດເຊີແລະນໍາໃຊ້ຢ່າງເຕັມທີ່ຂອງ CPU ຫຼາຍ, ຫຼືນໍາໃຊ້ກັບຫຼາຍເຄື່ອງຈັກ. ສະຖາປັດຕະຍະກໍານີ້ເຮັດໃຫ້ pyspider ໄວແທ້ໆ. ດັດຊະນີ. ເນື່ອງຈາກ pyspider ມີອົງປະກອບຕ່າງໆ, ທ່ານພຽງແຕ່ສາມາດດໍາເນີນການ pyspider ເພື່ອເລີ່ມຕົ້ນການປະຈໍາຕົວແລະການບໍລິການທີສາມຟຣີ. ຫຼືໃຊ້ MySQL ຫຼື MongoDB ແລະ RabbitMQ ເພື່ອນຳໃຊ້ກຸ່ມກວາດເວັບທີ່ແຈກຢາຍ. ເພື່ອປະຕິບັດ pyspider ໃນສະພາບແວດລ້ອມຂອງຜະລິດຕະພັນ, ອົງປະກອບທີ່ແລ່ນໃນແຕ່ລະຂະບວນການແລະເກັບຮັກສາຂໍ້ມູນໃນການບໍລິການຖານຂໍ້ມູນແມ່ນມີຄວາມຫນ້າເຊື່ອຖືແລະມີຄວາມຍືດຫຍຸ່ນຫຼາຍ. ເພື່ອນໍາໃຊ້ອົງປະກອບ pyspider ໃນແຕ່ລະຂະບວນການດຽວ, ທ່ານຈໍາເປັນຕ້ອງມີຢ່າງຫນ້ອຍຫນຶ່ງການບໍລິການຖານຂໍ້ມູນ. pyspider ໃນປັດຈຸບັນສະຫນັບສະຫນູນ MySQL, MongoDB ແລະ PostgreSQL. ທ່ານສາມາດເລືອກເອົາຫນຶ່ງໃນນັ້ນ.
ຄຸນລັກສະນະ
- ຂຽນ script ໃນ Python
- WebUI ທີ່ມີປະສິດທິພາບທີ່ມີຕົວແກ້ໄຂສະຄິບ, ຕິດຕາມວຽກງານ, ຜູ້ຈັດການໂຄງການແລະຕົວເບິ່ງຜົນໄດ້ຮັບ
- MySQL, MongoDB, Redis, SQLite, Elasticsearch; PostgreSQL ກັບ SQLAlchemy ເປັນ backend ຖານຂໍ້ມູນ
- RabbitMQ, Beanstalk, Redis ແລະ Kombu ເປັນແຖວຂໍ້ຄວາມ
- ບູລິມະສິດໜ້າວຽກ, ລອງໃໝ່, ແຕ່ລະໄລຍະ, ລວບລວມຄືນຕາມອາຍຸ, ແລະອື່ນໆ.
- ສະຖາປັດຕະຍະກຳທີ່ແຈກຢາຍ, ໜ້າ Crawl Javascript, Python 2&3, ແລະອື່ນໆ.
ພາສາການຂຽນໂປຣແກຣມ
Python
ປະເພດ
ນີ້ແມ່ນແອັບພລິເຄຊັນທີ່ຍັງສາມາດເອົາມາຈາກ https://sourceforge.net/projects/pyspider.mirror/. ມັນໄດ້ຖືກຈັດຢູ່ໃນ OnWorks ເພື່ອໃຫ້ດໍາເນີນການອອນໄລນ໌ໃນວິທີທີ່ງ່າຍທີ່ສຸດຈາກຫນຶ່ງໃນລະບົບປະຕິບັດງານຟຣີຂອງພວກເຮົາ.