هذا هو الأمر AutoSearchp الذي يمكن تشغيله في مزود الاستضافة المجانية OnWorks باستخدام إحدى محطات العمل المجانية المتعددة على الإنترنت مثل Ubuntu Online أو Fedora Online أو محاكي Windows عبر الإنترنت أو محاكي MAC OS عبر الإنترنت
برنامج:
اسم
AutoSearch - تطبيق تتبع بحث الويب
موجز
البحث التلقائي [- الإحصائيات] [- إطالة] - n "اسم الاستعلام" - "سلسلة الاستعلام" - محرك المحرك [- البريد الإلكتروني
[البريد الإلكتروني محمي]] [--options "opt = val"] ... [- تصفية "عامل التصفية"] [- المضيف المضيف] [- منفذ المنفذ]
[- مستخدم bbunny - كلمة المرور c4rr0t5] [--ignore_channels KABC، KCBS، KNBC] qid
البحث التلقائي - البحث التلقائي للإصدار - مساعدة البحث التلقائي - الرجل
الوصف
البحث التلقائي يجري بحثًا على شبكة الإنترنت ويضع النتائج المحددة فيه qid / index.html.
عمليات البحث اللاحقة (على سبيل المثال ، النموذج الثاني أعلاه) البحث التلقائي تحديد ما هي التغييرات (إذا
أي) حدث في النتائج المرسلة منذ التشغيل الأخير. هذه التغييرات المتزايدة
سجلت في qid / YYYYMMDD.html.
البحث التلقائي قابل للتشغيل كملف كرون مهمة لأنه يتم حفظ جميع معلمات الإدخال
في صفحات الويب. البحث التلقائي يمكن أن يعمل كوكيل استعلام آلي لبحث معين.
تم تصميم ملفات الإخراج لتكون مجموعة من صفحات الويب لعرض مجموعة النتائج بسهولة
باستخدام متصفح الويب.
على سبيل المثال:
البحث التلقائي - "النسخ المتماثل LSAM"
-s '"نسخ lsam" "
-E AltaVista
استعلام عن النسخ المتماثل
يقوم هذا الاستعلام (الذي يجب أن يكون كله في سطر واحد) بإنشاء دليل replication_query و
يملأها بالإخراج الرائع لاستعلام AltaVista حول "تكرار lsam" ، مع
صفحات بعنوان `` نسخ LSAM ''. (لاحظ الاقتباس: علامات الاقتباس المفردة في '' lsam
النسخ المتماثل للقذيفة ، علامات الاقتباس المزدوجة مخصصة لـ AltaVista للبحث عن ملف
العبارة بدلاً من الكلمات المنفصلة.)
مثال أكثر تعقيدًا:
البحث التلقائي - "روابط خارجية لـ LSAM"
-s '(الرابط: www.isi.edu/lsam أو الرابط: www.isi.edu/~lsam) -url: isi.edu'
-e AltaVista :: AdvancedWeb
-o البرودة = حار
يقوم هذا الاستعلام بإجراء بحث متقدم في AltaVista ويحدد (الافتراضي) `` البرودة ''
الخيار لمحرك البحث.
OPTIONS
"qid"
إنّ الـ سؤال معرف يحدد الدليل الذي فيه كل الملفات التي تتعلق بهذا
الاستعلام ونتائج البحث ستعيش. يمكن أن يكون مسارًا مطلقًا أو مسارًا نسبيًا
من cwd. إذا كان الدليل غير موجود ، فسيتم إنشاؤه والبحث الجديد
بدأت.
"--stats"
إظهار إحصائيات البحث: سلسلة الاستعلام ، عدد مرات الدخول ، عدد مرات الدخول التي تمت تصفيتها ،
سلسلة الفلتر ، عدد النتائج المعلقة (المحذوفة) ، حجم المجموعة السابقة ، المجموعة الحالية
الحجم ، إلخ.
"-v" أو "-verbose"
مطول: إخراج رسائل وتحذيرات إضافية.
"-n" أو "--qn" أو "--queryname"
حدد اسم الاستعلام. يتم استخدام اسم الاستعلام كعنوان في صفحات الويب ،
لذلك يجب أن تكون نسخة "لطيفة" من سلسلة الاستعلام.
"-s" أو "--qs" أو "--querystring"
حدد سلسلة الاستعلام. سلسلة الاستعلام هي سلسلة الأحرف التي ستكون
مقدم إلى محرك البحث. يمكنك تضمين أحرف خاصة للمجموعة أو إلى
يؤهل البحث.
"-e" أو "--engine"
حدد محرك البحث. سيتم إرسال سلسلة الاستعلام إلى المستخدم المحدد
محرك البحث.
في كثير من الحالات توجد إصدارات متخصصة من محركات البحث. على سبيل المثال،
التافيستا :: AdvancedWeb و AltaVista :: أخبار السماح بعمليات بحث أكثر قوة ويوزنت.
راجع AltaVista أو صفحة الرجل لمحرك البحث الخاص بك للحصول على تفاصيل حول متخصص
الاختلافات.
"--listnewurls"
بالإضافة إلى جميع عمليات الصيانة العادية للملفات ، اطبع جميع عناوين URL الجديدة إلى STDOUT ، بمعدل واحد لكل
الخط.
"-o" أو "--options"
حدد خيارات الاستعلام. سيتم إرسال خيارات الاستعلام إلى بحث المستخدم
محرك بسلسلة الاستعلام. تسمح هذه الميزة بتعديل سلسلة الاستعلام
لمحرك بحث أو خيار محدد. يمكن تحديد أكثر من خيار استعلام واحد.
مثال: يتسبب "-o what = news" في قيام AltaVista بالبحث في Usenet. على الرغم من أن هذا يعمل ، فإن
الآلية المفضلة في هذه الحالة ستكون "-e AltaVista :: News" أو "-e
AltaVista :: AdvancedNews ". الخيارات مخصصة للاستخدام الداخلي أو الخبراء.
"-f" أو "--uf" أو "--urlfilter"
يحدد هذا الخيار تعبيرًا عاديًا ستتم مقارنته بعناوين URL الخاصة بـ
أي نتائج إذا تطابقوا مع التعبير العادي غير المتحسس لحالة الأحرف ، فسيكونون كذلك
إزالتها من مجموعة النتائج.
مثال: يتجنب "-f '. * \. isi \ .edu'" جميع صفحات الويب الخاصة بـ ISI.
"--cleanup i"
احذف جميع آثار نتائج الاستعلام منذ أكثر من يوم مضى. إذا تم إعطاء --cleanup ،
سيتم تجاهل جميع الخيارات الأخرى بخلاف qid.
"--cmdline"
إعادة بناء سطر الأوامر الكامل (البحث التلقائي وجميع وسائطه) الذي تم استخدامه
لإنشاء نتائج الاستعلام. سيظهر سطر الأوامر في STDERR. إذا كان - cmdline هو
بالنظر إلى ذلك ، سيتم تجاهل جميع الخيارات الأخرى بخلاف qid.
"- mail user @ address" أو "-m user @ address"
بعد اكتمال البحث ، أرسل بريدًا إلكترونيًا إلى هذا المستخدم ، مع سرد النتائج الجديدة. البريد الإلكتروني هو
تنسيق HTML. يتطلب البريد الإلكتروني :: إرسال والوحدات ذات الصلة. إذا قمت بإرسال بريد إلكتروني من خلال
خادم SMTP ، يجب عليك تعيين متغير البيئة SMTPSERVER إلى اسم الخادم أو IP
عنوان. إذا كان خادم SMTP الخاص بك يتطلب كلمة مرور ، فيجب عليك تعيين متغيرات البيئة
SMTPUSERNAME و SMTPPASSWORD. إذا قمت بإرسال بريد إلكتروني عبر Sendmail ، فيجب عليك تعيين
متغير البيئة SENDMAIL إذا لم يكن الملف القابل للتنفيذ sendmail في المسار.
"--emailfrom user @ address"
إذا كان خادم البريد الصادر الخاص بك يرفض البريد الإلكتروني من مستخدمين معينين ، فيمكنك استخدام هذا
وسيطة لتعيين رأس من:.
"- مستخدم باني"
إذا كان محرك البحث يتطلب تسجيل دخول / كلمة مرور (على سبيل المثال ، Ebay :: Complete) ، فاستخدم هذا.
"- كلمة المرور Carr0t5"
إذا كان محرك البحث يتطلب تسجيل دخول / كلمة مرور (مثل Ebay :: Mature) ، فاستخدم هذا.
الوصف
البحث التلقائي يرسل استعلامًا إلى محرك بحث ، وينتج صفحات HTML تعكس مجموعة
"يضرب" (نتائج البحث المصفاة) التي يعرضها محرك البحث ، ويتتبع هذه النتائج
متأخر , بعد فوات الوقت. يتم عرض عنوان URL والعنوان في ملف qid / index.htmlوعنوان URL والعنوان و
يتم عرض الوصف في الملفات "الأسبوعية".
لتنظيم هذه النتائج ، يتم وضع كل نتيجة بحث في دليل معلومات الاستعلام
(قيد). يصبح الدليل "معالجة" نتائج البحث ، وهي طريقة سهلة لتتبع مجموعة من
نتائج. وبالتالي ، قد يحدد سؤال "/ usr / local / htdocs / lsam / autosearch / load_balancing"
النتائج على خادم الويب الخاص بك في "http://www.isi.edu/lsam/autosearch/load_balancing".
ستجد داخل دليل qid الملفات المتعلقة بهذا الاستعلام. الملف الأساسي هو
index.html و، مما يعكس أحدث نتائج البحث. كل نتيجة غير مفلترة لكل
يتم تخزين البحث في index.html و. عندما لا يتم العثور على نتيجة بواسطة محرك البحث ، يكون ملف
تمت إزالته من index.html و. كما يتم إرجاع نتائج جديدة للبحث من محرك البحث
يتم وضعهم فيها index.html و.
في الجزء السفلي من index.html و، هناك عنوان "نتائج البحث الأسبوعية" يتم تحديثه
في كل مرة يتم فيها تقديم البحث (راجع "البحث التلقائي"). قائمة عمليات البحث هي
مخزنة بترتيب زمني عكسي. عمليات التشغيل التي لا تقدم معلومات جديدة هي
مع تحديد
لم يتم العثور على نتائج فريدة للبحث في
يتم تحديد عمليات التشغيل التي تحتوي على تغييرات بواسطة
نتائج بحث الويب للبحث في
والتي سيتم ربطها بصفحة توضح بالتفصيل التغييرات من هذا التشغيل.
يتم تدوين نتائج البحث التفصيلية في الملفات الأسبوعية. يتم تسمية هذه الملفات YYYYMMDD.html
ويتم تخزينها في دليل qid. تتضمن الملفات الأسبوعية عنوان URL والعنوان وملف
الوصف (إن وجد). العنوان رابط لصفحة الويب الأصلية.
الآلي SEARCHING
على أنظمة شبيهة بـ UNIX ، كرون(1) يمكن استخدامها لإجراء عمليات بحث دورية وصفحات الويب
سيتم صيانتها بواسطة البحث التلقائي. لتأسيس البحث الأول ، استخدم المثال الأول
تحت SYNOPSIS. يجب تحديد qid واسم الاستعلام وسلسلة الاستعلام. إذا كان أي من ملفات
العناصر مفقودة ، ستتم مطالبتك بشكل تفاعلي بالعناصر المفقودة.
بمجرد اكتمال البحث الأول ، يمكنك إعادة إجراء البحث باستخدام النموذج الثاني أسفل
الخلاصة.
إدخال كرون مثل:
0 3 * * 1 /nfs/u1/wls/AutoSearch.pl / www / div7 / lsam / autosearch / caching
يمكن استخدامها لإجراء البحث كل يوم إثنين الساعة 3:00 صباحًا. اسم الاستعلام وسلسلة الاستعلام
يمكن أن تتكرر لكن لن يتم استخدامها. هذا يعني أنه مع خط كرون مثل:
0 3 * * 1 /nfs/u1/wls/AutoSearch.pl / www / div7 / lsam / autosearch / caching -n caching -s caching
يمكن إنشاء سلسلة بحث جديدة بالكامل بواسطة
rm -r / www / div7 / lsam / البحث التلقائي / التخزين المؤقت
ومع ذلك ، فإن السبب الوحيد لبدء سلسلة بحث جديدة هو التخلص من القديم
الملفات الأسبوعية.
لا نوصي بإجراء عمليات البحث أكثر من مرة في اليوم ، ولكن إذا كان الأمر كذلك ، فالملفات لكل تشغيل
سيتم تحديثه في المكان. تتم إضافة أي تغييرات إلى الصفحة مع تعليق "مؤخرًا
تمت الإضافة: "؛ وتتم الإشارة إلى عمليات الحذف بعبارة" تم التعليق مؤخرًا :. "
التغيير ال نظرة OF ال الصفحات
التنسيق الأساسي لهاتين الصفحتين بسيط وقابل للتخصيص. مطلب واحد هو أن
الهيكل الأساسي يبقى دون تغيير. تُستخدم تعليقات HTML لتحديد أقسام ملف
وثيقة. يمكن تغيير كل شيء تقريبًا باستثناء السلاسل التي تحدد ملف
يبدأ القسم وينتهي.
العلامات الجديرة بالملاحظة ومعناها:
. *
يتم وضع النص المتضمن في هذه العلامة في أعلى الإخراج
صفحة. إذا كان النص يحتوي على البحث التلقائي WEB البحث، ثم اسم الاستعلام
سوف يحل محله. إذا كان النص لا يحتوي على هذه السلسلة السحرية وهو كذلك
أول بحث على الإطلاق ، سيُطلب من المستخدم اسم استعلام.
النص الموجود بين الأقواس هو سلسلة الاستعلام. هذه هي الطريقة
البحث التلقائي يحافظ على سلسلة الاستعلام. يمكنك تعديل هذه السلسلة للتغيير
سلسلة الاستعلام ؛ ولكن فقط في qid / index.html. النص تطلب المستخدم is
خاص وسوف القوة البحث التلقائي لطلب سلسلة البحث من
المستخدم.
النص الموجود بين الأقواس هو محرك البحث. محركات أخرى
المدعومة هي HotBot و Lycos. يمكنك تحرير هذه السلسلة لتغيير
المحرك المستخدم ولكن فقط في qid / index.html. النص تطلب المستخدم خاص و
سيجبر البحث التلقائي لطلب سلسلة البحث من المستخدم.
النص المضمن بين الأقواس يحدد خيارات الاستعلام. عديد
يُسمح بحدوث هذا الأمر بتحديد خيارات متعددة.
النص الموجود بين الأقواس هو عامل تصفية URL. هذه هي الطريقة
البحث التلقائي يحافظ على الفلتر. مرة أخرى يمكنك تعديل هذه السلسلة لتغييرها
سلسلة الاستعلام ؛ ولكن فقط في qid / index.html. النص تطلب المستخدم is
خاص وسوف القوة البحث التلقائي لسؤال المستخدم (STDIN) عن الاستعلام
خيط. عند إعداد البحث الأول ، يجب عليك التعديل first_index.html,
ليست qid / index.html. مرشح URL هو معيار perl5 عادي
تعبير. سيتم الاحتفاظ بعناوين URL غير المتطابقة.
. *
يتم وضع النص المتضمن في هذه العلامة في أسفل الإخراج
صفحة. هذا مكان جيد لوضع التنقل ، ومعلومات مالك الصفحة ،
وما إلى ذلك.
ما تبقى من العلامات تقع في ثلاثة أضعاف ~ العنوان, ~ قالبو ~حيث ~ هو
ملخص ، أسبوعي ، مُلحق ، مُعلق. تظهر الأقسام الفرعية بالترتيب المحدد. ل
إنتاج قسم البحث التلقائي إخراج العنوان ، القالب ، القسم ، عدد نسخ
البيانات المنسقة و / المقطع. العلامات ووظيفتها هي:
~ العنوان تحدد علامة العنوان عنوان قسم من ملف الإخراج.
الملخص هو جزء الملخص ، إلخ. قد يكون القسم
فارغ (على سبيل المثال ، معلق) وبالتالي لا يوجد عنوان ناتج.
~ قالب تحدد علامة القالب كيفية تنسيق كل عنصر. نص بسيط
يتم استخدام الاستبدال لتغيير القالب إلى نص الإخراج الفعلي.
تمت الإشارة إلى النص الذي سيتم استبداله في ALLCAPS.
~ تُستخدم هذه العلامة لتحديد موقع القسم (ملخص ، أسبوعي ، إلخ). هذا
يمثل قسم n الفعلي من عناصر البيانات.
يمكنك تحرير هذه القيم في ملف qid / index.html صفحة بحث موجود. الملف
first_index.html (في الدليل أعلاه قيد) كقالب افتراضي للجديد
استفسار.
يمكن رؤية أمثلة على هذه الملفات في الصفحات الموجودة أسفل
"http://www.isi.edu/lsam/tools/autosearch/"، أو في الناتج الذي تم إنشاؤه بواسطة ملف
البحث التلقائي.
استخدم AutoSearchp عبر الإنترنت باستخدام خدمات onworks.net
