الشذوذ - عبر الإنترنت في السحابة

برنامج:

اسم

الشذوذ - الكشف عن البيانات الشاذة

موجز

شذوذ [-h | - مساعدة] [-v | - الإصدار] [-د|--تفاصيل]
[-t|--العتبة] [--الحد الأدنى N] [--الحد الأقصى N]
[-s|--stddev] [-n|--sample N] [-c|--معامل N]
[-q | - هادئ]
[-e|--تنفيذ البرنامج]
[-p|--معرف المنتج]

الوصف

يمكن أن يكشف الشذوذ عن البيانات الشاذة في دفق رقمي. من أجل القيام بذلك، يحتاج الشذوذ
لرؤية دفق من البيانات الرقمية، وتطبيق إحدى طرق الكشف عنها. إذا كان هناك شذوذ
تم اكتشافه، ويتم إجراء استجابة، يتم اختيارها من واحدة أو أكثر من الطرق المضمنة.

NUMERIC مجرى

يعمل الشذوذ بشكل أفضل في الأنبوب، وسيقرأ البيانات الرقمية فقط من مدخلاته. باعتبارها بسيطة
على سبيل المثال، لنفترض أنك ترغب في مراقبة متوسط ​​التحميل والبحث عن ارتفاعات غير عادية. الحمل
يمكن الحصول على المتوسط ​​من أمر "uptime":

$ الجهوزية
11:40 حتى 15 يومًا، 4:04، 6 مستخدمين، متوسطات التحميل: 0.38 0.32 0.32

يمكننا استخراج حمل الـ 5 دقائق (الرقم الثاني من الأرقام الثلاثة) باستخدام هذا:

وقت التشغيل $ | قطع -و 13 -د ''
0.29

ويمكن استخراج هذا الرقم مرة واحدة في الدقيقة باستخدام هذا:

$ بينما [1]؛ القيام بالجهوزية | قطع -f 13 -d ' '؛ النوم 60؛ منتهي
0.29
0.26
0.19

هذا هو نوع تدفق البيانات الذي يراقبه الشذوذ. المساحة البيضاء (المسافات، علامات التبويب،
الأسطر الجديدة) بين الأرقام، حتى نتمكن من محاكاة الدفق أعلاه مثل هذا:

$ صدى 0.29 0.26 0.19

هذه طريقة ملائمة لإثبات الشذوذ، كما هو موضح أدناه.

كشف - العتبة

إن أبسط طريقة للكشف هي العتبة، التي تقارن البيانات بقيمة مطلقة.
يمكن لهذه الطريقة استخدام الحد الأدنى والحد الأقصى للقيمة للمقارنة. هذه البدائل
كلها صالحة، والاستفادة من --min، --max أو كليهما:

الشذوذ - العتبة - الحد الأدنى 1.22 - الحد الأقصى 9.75
الشذوذ - العتبة - دقيقة 1.22
الشذوذ - العتبة - الحد الأقصى 9.75

في المثال التالي، سيتم اكتشاف القيمتين "1" و"10" كقيمتين شاذتين:

$ صدى 2 1 3 6 10 5 | الشذوذ - العتبة - الحد الأدنى 1.5 - الحد الأقصى 8
تم اكتشاف بيانات شاذة. القيمة 1 أقل من الحد الأدنى 1.5.
تم اكتشاف بيانات شاذة. القيمة 10 أعلى من الحد الأقصى وهو 8.

كشف - معياري انحراف

يقيس الانحراف المعياري الاختلافات عن القيمة المتوسطة لعينة من البيانات، وهو
مفيدة للكشف عن القيم غير العادية. يمكن اختيار حجم العينة بحيث يكون هناك
هي بيانات كافية لتحديد قيمة متوسطة جيدة، ولكن القيمة الافتراضية هي 10. العينة المحدودة
الحجم يعني أنه يتم استخدام نافذة متجددة من البيانات، وبالتالي المتوسط ​​والمعياري
يتم تحديث الانحراف للنافذة الحالية. وهذا يجعل الرصد قابلاً للتكيف إلى حد ما.
هنا مثال:

الشذوذ -stddev -العينة 20

يستخدم هذا حجم عينة من أحدث 20 قيمة، وسيكتشف أي قيم موجودة
+/- 1 انحراف معياري عن المتوسط. مثال:

$ صدى 1 2 3 4 5 6 | الشذوذ -stddev -العينة 5
تم اكتشاف بيانات شاذة. القيمة 6 أكبر من 1 سيجما (سيجما) أعلى من القيمة المتوسطة
3، وحجم العينة 5.

مع حجم عينة يبلغ 5، تتم المقارنات فقط بعد رؤية القيمة السادسة. في ال
على سبيل المثال، القيمة المتوسطة لـ [1 2 3 4 5] هي 3، والانحراف المعياري هو 1.58. هذا
يعني أن القيمة السادسة تعتبر شاذة إذا كانت ضمن النطاق (6 +/- 3)،
وهو ما بين 1.42 و 4.58.

لجعل هذا الأمر أقل حساسية، تم تقديم معامل، والذي يكون افتراضيًا 1.0 (كما هو مذكور أعلاه)
ولكن يمكن تجاوزها:

$ صدى 1 2 3 4 5 6 | الشذوذ --stddev --العينة 5 --المعامل 1.9
$

في هذا المثال، لا تعتبر القيمة السادسة قيمة شاذة لأنها تقع ضمن النطاق
(3 +/- (1.9 * 1.58)) وهو ما بين -0.002 و6.002.

RESPONSE - رسالة

استجابة الرسالة هي الاستجابة الافتراضية، وتتكون من سطر واحد من النص المطبوع. إنها
وصف لسبب اعتبار قيمة البيانات حالة شاذة. هنا مثال:

$ صدى 1 2 3 | الشذوذ - العتبة - الحد الأقصى 2.5
تم اكتشاف بيانات شاذة. القيمة 3 أعلى من الحد الأقصى وهو 2.5.

يمكن منع الرسالة، ولكن يجب تحديد استجابة أخرى، حتى يكون هناك
نوع من الرد:

$ صدى 1 2 3 | شذوذ - العتبة - الحد الأقصى 2.5 - هادئ ...

RESPONSE - نفذ - اعدم

يمكن للشذوذ تنفيذ برنامج استجابةً للاكتشاف. هنا مثال يستخدم "التاريخ"
الأمر، ولكن يمكن استخدام أي برنامج:

$ صدى 1 2 3 | شذوذ - العتبة - الحد الأقصى 2.5 - هادئ - تنفيذ "/ بن / التاريخ +%s'
1361727327

RESPONSE - إشارة

يمكن أن ترسل الشذوذ إشارة USR1 إلى البرنامج استجابةً للاكتشاف:

$ صدى 1 2 3 | شذوذ - العتبة - الحد الأقصى 2.5 - هادئ - معرف الرقم 12345

يؤدي هذا إلى إرسال إشارة USR1 إلى العملية باستخدام PID 12345. وسيقوم برنامج الاستقبال بذلك
بحاجة للرد وفقا لذلك.

CREDITS & حقوق النسخ

حقوق الطبع والنشر (C) 2013 لشركة Göteborg Bit Factory.

يتم توزيع الشذوذ بموجب ترخيص معهد ماساتشوستس للتكنولوجيا. يرى http://www.opensource.org/licenses/mit-
License.php لمزيد من المعلومات.

استخدم الشذوذ عبر الإنترنت باستخدام خدمات onworks.net