טעלעמעטרי אין דזשונאָס פֿאַר אַי / מל ווערקלאָודז
מחבר: Shalini Mukherjee

הקדמה

ווי אַי קנויל פאַרקער ריקווייערז לאָססלעסס נעטוואָרקס מיט הויך טרופּוט און נידעריק לייטאַנסי, אַ קריטיש עלעמענט פון די אַי נעץ איז די זאַמלונג פון מאָניטאָרינג דאַטן. Junos Telemetry ינייבאַלז גראַניאַלער מאָניטאָרינג פון שליסל פאָרשטעלונג ינדיקאַטאָרס, אַרייַנגערעכנט שוועלן און קאָונטערס פֿאַר קאַנדזשעסטשאַן פאַרוואַלטונג און טראַפיק מאַסע באַלאַנסינג. gRPC סעשאַנז שטיצן די סטרימינג פון טעלעמעטרי דאַטן. gRPC איז אַ מאָדערן, אָפֿן-מקור, הויך פאָרשטעלונג פריימווערק וואָס איז געבויט אויף הטטפּ / 2 אַריבערפירן. עס ימפּאַוערז געבוירן ביידירעקטיאָנאַל סטרימינג קייפּאַבילאַטיז און ינקלודז פלעקסאַבאַל מנהג מעטאַדאַטאַ אין בעטן כעדערז. דער ערשט שריט אין טעלעמעטרי איז צו וויסן וואָס דאַטן זאָל זיין געזאמלט. דערנאָך מיר קענען פונאַנדערקלייַבן די דאַטן אין פאַרשידן פֿאָרמאַטירונגען. אַמאָל מיר קלייַבן די דאַטן, עס איז וויכטיק צו פאָרשטעלן עס אין אַ פֿאָרמאַט וואָס איז גרינג צו מאָניטאָר, מאַכן דיסיזשאַנז און פֿאַרבעסערן די סערוויס וואָס איז געפֿינט. אין דעם פּאַפּיר, מיר נוצן אַ טעלעמעטרי סטאַק קאַנסיסטינג פון טעלעגראַף, ינפלוקסדב און גראַפאַנאַ. דעם טעלעמעטרי אָנלייגן קאַלעקץ דאַטן ניצן אַ שטופּ מאָדעל. טראַדיציאָנעל ציען מאָדעלס זענען ריסאָרס-אינטענסיווע, דאַרפן מאַנואַל ינטערווענטיאָן און קען אַרייַננעמען אינפֿאָרמאַציע גאַפּס אין די דאַטן זיי קלייַבן. פּוש מאָדעלס באַקומען די לימיטיישאַנז דורך דעליווערינג דאַטן ייסינגקראַנאַסלי. זיי באַרייַכערן די דאַטן דורך ניצן באַניצער-פרייַנדלעך tags און נעמען. אַמאָל די דאַטן זענען אין אַ מער ליינעוודיק פֿאָרמאַט, מיר קראָם עס אין אַ דאַטאַבייס און נוצן עס אין אַ ינטעראַקטיוו וויזשוואַלאַזיישאַן web אַפּלאַקיישאַן פֿאַר אַנאַלייזינג די נעץ. פיגורע. 1 ווייַזן אונדז ווי דער אָנלייגן איז דיזיינד פֿאַר עפעקטיוו דאַטן זאַמלונג, סטאָרידזש און וויזשוואַלאַזיישאַן, פֿון נעץ דעוויסעס פּושינג דאַטן צו די קאַלעקטער צו די דאַטן געוויזן אויף דאַשבאָרדז פֿאַר אַנאַליסיס.

TIG Stack

מיר געוויינט אַן ובונטו סערווער צו ינסטאַלירן אַלע ווייכווארג אַרייַנגערעכנט די TIG אָנלייגן.

טעלעגראַף
צו זאַמלען דאַטן, מיר נוצן טעלעגראַף אויף אַן ובונטו סערווער פליסנדיק 22.04.2. די טעלעגראַף ווערסיע פליסנדיק אין דעם דעמאָ איז 1.28.5.
טעלעגראַף איז אַ פּלוגין געטריבן סערווער אַגענט פֿאַר קאַלעקטינג און ריפּאָרטינג מעטריקס. עס ניצט פּראַסעסער plugins צו באַרייַכערן און נאָרמאַלייז די דאַטן. דער רעזולטאַט plugins זענען געניצט צו שיקן די דאַטן צו פאַרשידן דאַטן סטאָרז. אין דעם דאָקומענט מיר נוצן צוויי plugins: איינער פֿאַר אָפּענקאָנפיגעד סענסאָרס און די אנדערע פֿאַר דזשוניפּער געבוירן סענסאָרס.
InfluxDB
צו קראָם די דאַטן אין אַ צייט סעריע דאַטאַבייס, מיר נוצן InfluxDB. דער רעזולטאַט פּלוגין אין טעלעגראַף סענדז די דאַטן צו ינפלוקסדב, וואָס סטאָרז עס אין אַ העכסט עפעקטיוו שטייגער. מיר נוצן V1.8 ווייַל עס איז קיין CLI פֿאַר V2 און העכער.
גראפאנא
גראַפאַנאַ איז געניצט צו וויזשוואַלייז די דאַטן. Grafana פּולז די דאַטן פֿון ינפלוקסדב און אַלאַוז ניצערס צו שאַפֿן רייַך און ינטעראַקטיוו דאַשבאָרדז. דאָ מיר לויפן ווערסיע 10.2.2.

קאָנפיגוראַטיאָן אויף די סוויטש

צו ינסטרומענט דעם אָנלייגן, מיר ערשטער דאַרפֿן צו קאַנפיגיער די באַשטימען ווי געוויזן אין פיגורע 2. מיר האָבן געוויינט פּאָרט 50051. קיין פּאָרט קענען זיין געוויינט דאָ. קלאָץ אין צו די QFX באַשטימען און לייגן די פאלגענדע קאַנפיגיעריישאַן.

באַמערקונג: די קאַנפיגיעריישאַן איז פֿאַר לאַבס / פּאָקס ווייַל די פּאַראָל איז טראַנסמיטטעד אין קלאָר טעקסט. ניצן SSL צו ויסמיידן דעם.

סוויווע

נגינקס
דאָס איז נויטיק אויב איר קענען נישט ויסשטעלן די פּאָרט אויף וואָס Grafana איז כאָוסטיד. דער ווייַטער שריט איז צו ינסטאַלירן nginx אויף די ובונטו סערווער צו דינען ווי אַ פאַרקערט פּראַקסי אַגענט. אַמאָל nginx איז אינסטאַלירן, לייג די שורות געוויזן אין פיגורע 4 צו די "פעליקייַט" טעקע און מאַך די טעקע פון ​​/etc/nginx צו /etc/nginx/sites-enabled.

פאַרזיכערן אַז די פיירוואַל איז אַדזשאַסטיד צו געבן פול אַקסעס צו די nginx סערוויס ווי געוויזן אין פיגורע 5.

אַמאָל nginx איז אינסטאַלירן און די פארלאנגט ענדערונגען זענען געמאכט, מיר זאָל קענען אַקסעס Grafana פֿון אַ web בלעטערער דורך ניצן די IP אַדרעס פון די ובונטו סערווער ווו אַלע די ווייכווארג איז אינסטאַלירן.
עס איז אַ קליין גליטש אין Grafana וואָס קען נישט לאָזן איר באַשטעטיק די פעליקייַט פּאַראָל. ניצן די סטעפּס אויב איר לויפן אין דעם אַרויסגעבן.
סטעפּס צו זיין דורכגעקאָכט אויף די Ubuntu סערווער צו שטעלן די פּאַראָל אין Grafana:

• גיין צו /var/lib/grafana/grafana.db
• ינסטאַלירן sqllite3
  o sudo apt install sqlite3
• לויפן דעם באַפֿעל אויף דיין וואָקזאַל
  o sqlite3 grafana.db
•  Sqlite באַפֿעלן פּינטלעך אָפּענס; לויפן די פאלגענדע אָנפֿרעג:
  >מעקן פון באַניצער ווו לאָגין = 'אַדמין'
• ריסטאַרט גראַפאַנאַ און טיפּ אַדמין ווי נאמען און פּאַראָל. עס פּראַמפּס פֿאַר אַ נייַ פּאַראָל.

אַמאָל אַלע די ווייכווארג איז אינסטאַלירן, שאַפֿן די קאַנפיגיעריישאַן טעקע אין טעלעגראַף וואָס וועט העלפֿן צו ציען די טעלעמעטרי דאַטן פון די באַשטימען און שטופּן עס צו ינפלוקסדב.

Openconfig סענסאָר פּלוגין

אויף די ובונטו סערווער, רעדאַגירן די /etc/telegraf/telegraf.conf טעקע צו לייגן אַלע די פארלאנגט. plugins און סענסאָרס. פֿאַר די אָפּענקאָנפיג סענסאָרס, מיר נוצן די gNMI פּלוגין געוויזן אין פיגורע 6. פֿאַר דעמאָ צוועקן, לייגן די האָסטנאַמע ווי "ספּינע1", די פּאָרט נומער "50051" וואָס איז געניצט פֿאַר גרפּק, די נאמען און פּאַראָל פון די באַשטימען, און די נומער פון סעקונדעס פֿאַר רידיאַל אין פאַל פון דורכפאַל.
אין די אַבאָנעמענט סטאַנזאַ, לייגן אַ יינציק נאָמען, "קפּו" פֿאַר דעם באַזונדער סענסער, די סענסער דרך און די צייט מעהאַלעך פֿאַר גראַבינג די דאַטן פֿון די באַשטימען. לייג די זעלבע פּלוגין inputs.gnmi און inputs.gnmi.subscription פֿאַר אַלע אָפֿן קאַנפיגיעריישאַן סענסאָרס. (פיגורע 6)

געבוירן סענסאָר פּלוגין

דאָס איז אַ דזשוניפּער טעלעמעטרי צובינד פּלוגין געניצט פֿאַר געבוירן סענסאָרס. אין דער זעלביקער telegraf.conf טעקע, לייגן די געבוירן סענסער פּלוגין inputs.jti_openconfig_telemetry ווו די פעלדער זענען כּמעט די זעלבע ווי openconfig. ניצן אַ יינציק קליענט שייַן פֿאַר יעדער סענסער; דאָ, מיר נוצן "טעלעגראַף 3". די יינציק נאָמען געניצט דאָ פֿאַר דעם סענסער איז "מעם" (פיגורע 7).

לעסאָף, לייגן אַ רעזולטאַט פּלוגין outputs.influxdb צו שיקן דעם סענסער דאַטן צו ינפלוקסדב. דאָ, די דאַטאַבייס איז געהייסן "טעלעגראַף" מיט נאמען ווי "ינפלאַקס" און פּאַראָל "ינפלוקסדב" (פיגורע 8).

אַמאָל איר האָבן עדיטיד די telegraf.conf טעקע, ריסטאַרט די טעלעגראַף דינסט. איצט, קאָנטראָלירן די InfluxDB CLI צו מאַכן זיכער אויב מעזשערמאַנץ זענען באשאפן פֿאַר אַלע יינציק סענסאָרס. טיפּ "ינפלוקס" צו אַרייַן די InfluxDB CLI.

ווי געזען אין פיגורע. 9, אַרייַן די ינפלוקסדב פּינטלעך און נוצן די דאַטאַבייס "טעלעגראַף". כל די יינציק נעמען געגעבן צו די סענסאָרס זענען ליסטעד ווי מעזשערמאַנץ.
צו זען די רעזולטאַט פון יעדער מעזשערמאַנט, נאָר צו מאַכן זיכער אַז די טעלעגראַף טעקע איז ריכטיק און די סענסער אַרבעט, נוצן די באַפֿעל "סעלעקטירן * פֿון קפּו שיעור 1" ווי געוויזן אין פיגורע 10.

יעדער מאָל ענדערונגען זענען געמאכט צו די telegraf.conf טעקע, מאַכן זיכער צו האַלטן ינפלוקסדב, ריסטאַרט טעלעגראַף, און דאַן אָנהייב ינפלוקסדב.
קלאָץ אין צו Grafana פֿון דעם בלעטערער און שאַפֿן דאַשבאָרדז נאָך ינשורינג אַז די דאַטן זענען קאַלעקטאַד ריכטיק.
גיין צו קאַנעקשאַנז> ינפוקסדב> לייג נייַ דאַטן מקור.

1. געבן אַ נאָמען צו דעם דאַטן מקור. אין דעם דעמאָ עס איז "פּרובירן-1".
2.  אונטער די הטטפּ סטאַנזאַ, נוצן די Ubuntu סערווער IP און 8086 פּאָרט.
   
3. אין די ינפלוקסדב דעטאַילס, נוצן די זעלבע דאַטאַבייס נאָמען, "טעלעגראַף," און צושטעלן די נאמען און פּאַראָל פון די ובונטו סערווער.
4. דריקט היט & פּרובירן. פאַרזיכערן אַז איר זען די אָנזאָג, "געראָטן".
   
5. אַמאָל די דאַטן מקור איז הצלחה צוגעגעבן, גיין צו דאַשבאָאַרדס און גיט New. לאָמיר מאַכן אַ ביסל דאַשבאָרדז וואָס זענען יקערדיק פֿאַר AI / ML ווערקלאָודז אין רעדאַקטאָר מאָדע.

Exampליי פון סענסאָר גראַפס

די פאלגענדע זענען עקסampעטלעכע הויפּט קאָונטערס וואָס זענען יקערדיק פֿאַר מאָניטאָרינג אַן אַי / מל נעץ.
פּראָצענטtage יוטאַלאַזיישאַן פֿאַר אַ ינגרעסס צובינד et-0/0/0 אויף רוקנביין-1

• אויסקלייַבן די דאַטן מקור ווי טעסט-1.
• אין די FROM אָפּטיילונג, אויסקלייַבן די מעזשערמאַנט ווי "צובינד". דאָס איז דער יינציק נאָמען געניצט פֿאַר דעם סענסער דרך.
• אין די WHERE אָפּטיילונג, אויסקלייַבן מיטל::tag, און אין די tag ווערט, סעלעקטירן דעם באַלעבאָס נאָמען פון די באַשטימען, דאָס איז, ספּינע 1.
• אין די סעלעקט אָפּטיילונג, קלייַבן די סענסער צווייַג וואָס איר ווילן צו מאָניטאָר; אין דעם פאַל, קלייַבן "פעלד (/ ינטערפייסיז / צובינד [if_name='et-0/0/0'] / שטאַט / קאָונטערס / אויב_ינ_1ס_אָקטעץ)". איצט אין דער זעלביקער אָפּטיילונג, גיט "+" און לייגן דעם כעזשבן מאַט (/50000000000 * 100). מיר זענען בייסיקלי קאַלקיאַלייטינג די פּראָצענטtagניצן אַ 400G צובינד.
• מאַכן זיכער אַז די פאָרמאַט איז "צייט-סעריע," און נאָמען די גראַפיק אין די אַליאַס אָפּטיילונג.

שפּיץ באַפער אַקיאַפּאַנסי פֿאַר קיין ריי

• אויסקלייַבן די דאַטן מקור ווי טעסט-1.
• אין די FROM אָפּטיילונג, אויסקלייַבן די מעזשערמאַנט ווי "באַפער."
• אין די WHERE אָפּטיילונג, עס זענען דריי פעלדער צו פּלאָמבירן. אויסקלייַבן מיטל::tag, און אין די tag ווערט אויסקלייַבן די האָסטנאַמע פון ​​די באַשטימען (ד"ה רוקנביין-1); און סעלעקטירן /cos/interfaces/interface/@name::tag און אויסקלייַבן די צובינד (ד"ה עט- 0/0/0); און סעלעקטירן אויך די ריי, /cos/interfaces/interface/queues/queue/@queue::tag און קלייַבן די ריי נומער 4.
• אין די סעלעקט אָפּטיילונג, קלייַבן די סענסער צווייַג וואָס איר ווילן צו מאָניטאָר; אין דעם פאַל, סעלעקטירן "פעלד (/קאָס/ ינטערפייסיז/ צובינד/קוועועס/ריי/פּעאַקבופעראָוקפּאַנסי)."
• מאַכן זיכער אַז די פאָרמאַט איז "צייט-סעריע" און נאָמען די גראַפיק אין די אַליאַס אָפּטיילונג.

איר קענען קלייַבן דאַטן פֿאַר קייפל ינטערפייסיז אויף דער זעלביקער גראַפיק ווי אין פיגורע 17 פֿאַר et-0/0/0, et-0/0/1, et-0/0/2 עטק.

PFC און ECN מיינען דעריוואַט

פֿאַר דערגייונג די דורכשניטלעך דעריוואַט (די דיפפערענסע אין ווערט אין אַ צייט קייט), נוצן די רוי אָנפֿרעג מאָדע.
דאָס איז די ינפלאַקס אָנפֿרעג וואָס מיר האָבן גענוצט צו געפֿינען די דורכשניטלעך דעריוואַט צווישן צוויי PFC וואַלועס אויף et-0/0/0 פון Spine-1 אין אַ סעק.
סעלעקט דעריוואַט (מין ("/ ינטערפייסיז / צובינד[if_name='et-0/0/0′]/שטאַט/pfc-counter/tx_pkts"), 1 ס) פֿון "צובינד" ווו ("מיטל"::tag = 'רוקנביין-1') און $ צייט פילטער גרופּע לויט צייט ($ ינטערוואַל)

סעלעקט דעריוואַט (מיינירן ("/ ינטערפייסיז / צובינד[if_name='et-0/0/8′]/שטאַט/ערror-counters/ecn_ce_marked_pkts"), 1 ס) פֿון "צובינדונג" ווו ("מיטל"::tag = 'רוקנביין-1') און $ צייט פילטער גרופּע לויט צייט ($ ינטערוואַל)

אַרייַנשרייַב מיטל ערראָרס מיינען דעריוואַט

די רוי אָנפֿרעג פֿאַר מיטל ערראָרס מיינען דעריוואַט איז:
סעלעקט דעריוואַט (מין ("/ ינטערפייסיז / צובינד[if_name='et-0/0/0′]/שטאַט/ערror-counters/if_in_resource_errors"), 1s) FROM "interface" WHERE ("מיטל"::tag = 'רוקנביין-1') און $ צייט פילטער גרופּע לויט צייט ($ ינטערוואַל)

עק טראפנס מיינען דעריוואַט

די רוי אָנפֿרעג פֿאַר עק טראפנס מיינען דעריוואַט איז:
סעלעקט דעריוואַט (מיינירן ("/ קאָס / ינטערפייסיז / צובינד / קיוז / ריי / טיילדראָפּביטעס"), 1 ס) פֿון "באַפער" WHERE ("מיטל"::tag = 'בלאַט-1' און "/cos/interfaces/interface/@name"::tag = 'et-0/0/0' און "/cos/interfaces/interface/queues/queue/@queue"::tag = '4') און $ צייט פילטער גרופּע לויט צייט ($ __ ינטערוואַל) פּלאָמבירן (נול)
 קפּו יוטאַלאַזיישאַן

• אויסקלייַבן די דאַטן מקור ווי טעסט-1.
• אין די FROM אָפּטיילונג, אויסקלייַבן די מעזשערמאַנט ווי "newcpu"
• אין די WHERE, עס זענען דריי פעלדער צו פּלאָמבירן. אויסקלייַבן מיטל::tag און אין די tag ווערט סעלעקטירן דעם באַלעבאָס נאָמען פון די באַשטימען (ד"ה רוקנביין-1). און אין /קאָמפּאָנענטס/קאָמפּאָנענט/פּראָפּערטיעס/פּראָפּערטיעס/נאָמען:tag, און סעלעקטירן cpuutilization-total AND אין נאָמען::tag אויסקלייַבן RE0.
• אין די סעלעקט אָפּטיילונג, קלייַבן די סענסער צווייַג וואָס איר ווילן צו מאָניטאָר. אין דעם פאַל, אויסקלייַבן "פעלד (שטאַט / ווערט)".

די רוי אָנפֿרעג פֿאַר דערגייונג די ניט-נעגאַטיוו דעריוואַט פון עק טראפנס פֿאַר קייפל סוויטשיז אויף קייפל ינטערפייסיז אין ביטן / סעק.
SELECT non_negative_derivetive(מין(“/cos/interfaces/interface/queues/queue/tailDropBytes”), 1s)*8 FROM “buffer” WHERE (מיטל::tag =~ /^ רוקנביין-[1-2]$/) און ("/cos/interfaces/interface/@name"::tag =~ /et-0\/0\/[0-9]/ אָדער "/cos/interfaces/interface/@name"::tag=~/et-0\/0\/1[0-5]/) און $timeFilter גרופּע לויט צייט ($__ינטערוואַל), מיטל::tag פּלאָמבירן (נול)

דאס זענען געווען עטלעכע פון ​​די עקסampגראַפס וואָס קענען זיין באשאפן פֿאַר מאָניטאָרינג אַן AI / ML נעץ.

קיצער

דער פּאַפּיר ילאַסטרייץ דעם אופֿן פון פּולינג טעלעמעטרי דאַטן און וויזשוואַלייזינג עס דורך קריייטינג גראַפס. דער צייטונג רעדט ספּאַסיפיקלי וועגן AI / ML סענסאָרס, ביידע געבוירן און אָופּאַנד, אָבער די סעטאַפּ קענען זיין געוויינט פֿאַר אַלע מינים פון סענסאָרס. מיר האָבן אויך ינקלודעד סאַלושאַנז פֿאַר קייפל ישוז וואָס איר קען האָבן בעת ​​קריייטינג די סעטאַפּ. די סטעפּס און אַוטפּוץ דיפּיקטיד אין דעם פּאַפּיר זענען ספּעציפֿיש פֿאַר די ווערסיעס פון די TIG אָנלייגן דערמאנט פריער. עס איז אונטערטעניק צו טוישן דיפּענדינג אויף די ווערסיע פון ​​די ווייכווארג, די סענסאָרס און די Junos ווערסיע.

רעפערענצן

Juniper Yang Data Model Explorer פֿאַר אַלע סענסער אָפּציעס
https://apps.juniper.net/ydm-explorer/
Openconfig פאָרום פֿאַר אָפּענקאָנפיג סענסאָרס
https://www.openconfig.net/projects/models/

פֿירמע און סאַלעס הויפּטקוואַרטיר
Juniper Networks, Inc.
1133 כידעש וועג
Sunnyvale, CA 94089 USA
טעלעפאָן: 888. JUNIPER (888.586.4737)
אָדער +1.408.745.2000
פאַקס: +1.408.745.2100
www.juniper.net
APAC און EMEA הויפּטקוואַרטיר
דזשוניפּער נעטוואָרקס אינטערנאַציאָנאַלער בוו
באָעינג עוועניו 240
1119 PZ Schiphol-Rijk
אמסטערדאם, האלאנד
טעלעפאָנירן: +31.207.125.700
פאַקס: +31.207.125.701
קאַפּירייט 2023 דזשוניפּער נעטוואָרקס. ינק. אַלע רעכט רעזערווירט. דזשוניפּער נעטוואָרקס, דזשוניפּער נעטוואָרקס לאָגאָ, דזשוניפּער, דזשונאָס און אנדערע טריידמאַרקס זענען רעגיסטרירט טריידמאַרקס פון דזשוניפּער נעטוואָרקס. ינק. און / אָדער זייַן אַפיליאַץ אין די פאַרייניקטע שטאַטן און אנדערע לענדער. אנדערע נעמען קענען זיין טריידמאַרקס פון זייער ריספּעקטיוו אָונערז. Juniper Networks אַסומז קיין פֿאַראַנטוואָרטלעכקייט פֿאַר קיין ינאַקיעראַסיז אין דעם דאָקומענט. Juniper Networks ריזערווז די רעכט צו טוישן. מאָדיפיצירן. אַריבערפירן, אָדער אַנדערש רעוויסע דעם ויסגאַבע אָן באַמערקן.
שיקן באַמערקונגען צו: design-center-comments@juniper.net V1.0/240807/ejm5-telemetry-junos-ai-ml

דאָקומענטן / רעסאָורסעס

דזשוניפּער נעטוואָרקס טעלעמעטרי אין דזשונאָס פֿאַר אַי מל ווערקלאָודז ווייכווארג [pdfבאַניצער גייד טעלעמעטרי אין דזשונאָס פֿאַר אַי מל ווערקלאָודז ווייכווארג, דזשונאָס פֿאַר אַי מל ווערקלאָודז ווייכווארג, אַי מל וואָרקלאָודז ווייכווארג, וואָרקלאָודז ווייכווארג, ווייכווארג

רעפערענצן

• באַניצער מאַנואַל