معیارهای Amazon MSK برای نظارت با CloudWatch

Amazon MSK با Amazon CloudWatch ادغام می شود تا بتوانید معیارهای CloudWatch را برای خوشه Amazon MSK خود جمع آوری ، مشاهده و تجزیه و تحلیل کنید. معیارهایی که برای خوشه MSK خود پیکربندی می کنید به طور خودکار جمع آوری و به CloudWatch منتقل می شوند. شما می توانید سطح مانیتورینگ را برای یک خوشه MSK به یکی از موارد زیر تنظیم کنید: پیش فرض ، per_broker ، per_topic_per_broker یا per_topic_per_partition. جداول در بخش های زیر تمام معیارهایی را که از هر سطح نظارت در دسترس هستند نشان می دهد.

معیارهای سطح پیش فرض رایگان هستند. قیمت گذاری برای سایر معیارها در صفحه قیمت گذاری Amazon CloudWatch شرح داده شده است.

نظارت بر سطح پیش فرض

معیارهای شرح داده شده در جدول زیر در سطح نظارت پیش فرض موجود است. آنها رایگان هستند.

بعد از اینکه خوشه به حالت فعال رسید.

نام خوشه ای ، شناسه کارگزار

تعادل باقی مانده از اعتبارات ورودی-خروجی برای حجم EBS در خوشه. از آن برای بررسی تأخیر یا کاهش توان استفاده کنید.

هنگامی که عملکرد پایه یک حجم بالاتر از حداکثر عملکرد پشت سر هم باشد ، برای حجم EBS گزارش نمی شود. برای اطلاعات بیشتر ، به اعتبار I/O و عملکرد پشت سر هم مراجعه کنید.

نام خوشه ای ، شناسه کارگزار

بعد از اینکه خوشه به حالت فعال رسید.

نام خوشه ای ، شناسه کارگزار

این متریک می تواند به شما در نظارت بر مانده اعتبار CPU در کارگزاران کمک کند. اگر مصرف CPU شما بالاتر از سطح پایه 20 ٪ استفاده باشد ، می توانید از مانده اعتبار CPU استفاده کنید ، که می تواند تأثیر منفی بر عملکرد خوشه داشته باشد. می توانید برای کاهش بار CPU قدم بردارید. به عنوان مثال ، می توانید تعداد درخواست های مشتری را کاهش داده یا نوع کارگزار را در یک نوع کارگزار M5 به روز کنید.

بعد از اینکه خوشه به حالت فعال رسید.

نام خوشه ای ، شناسه کارگزار

بعد از اینکه خوشه به حالت فعال رسید.

نام خوشه ای ، شناسه کارگزار

معیارهای سطح بالا که نشان دهنده تعداد بسته های شکل (کاهش یافته یا صف بندی شده) به دلیل بیش از تخصیص شبکه است. جزئیات دقیق تر با معیارهای per_broker در دسترس است.

نظارت بر سطح Broker

هنگامی که سطح نظارت را روی PER_BROKER تنظیم می کنید ، علاوه بر تمام معیارهای سطح پیش فرض ، معیارهای شرح داده شده در جدول زیر را نیز دریافت می کنید. شما در جدول زیر معیارها را پرداخت می کنید ، در حالی که معیارهای سطح پیش فرض همچنان رایگان است. معیارهای موجود در این جدول ابعاد زیر را دارند: نام خوشه ای ، شناسه کارگزار.

تعداد بسته های شکل به دلیل پهنای باند کل ورودی از حداکثر برای کارگزار فراتر رفته است.

تعداد بسته های شکل به دلیل پهنای باند کل برون مرزی از حداکثر برای کارگزار فراتر رفته است.

تعداد بسته های شکل به دلیل ردیابی اتصال از حداکثر برای کارگزار فراتر رفته است. ردیابی اتصال به گروه های امنیتی مربوط می شود که هر اتصال ایجاد شده را ردیابی می کند تا اطمینان حاصل شود که بسته های برگشتی مطابق انتظار تحویل داده می شوند.

تعداد اتصالات در هر ثانیه در هر شنونده بسته شده است. این تعداد برای هر شنونده جمع شده و برای شنوندگان مشتری فیلتر می شود.

تعداد اتصالات جدید در هر ثانیه برای هر شنونده ایجاد شده است. این تعداد برای هر شنونده جمع شده و برای شنوندگان مشتری فیلتر می شود.

این متریک می تواند به شما در نظارت بر استفاده از اعتبار CPU در موارد کمک کند. اگر مصرف CPU شما بالاتر از سطح پایه 20 ٪ پایدار باشد ، می توانید از مانده اعتبار CPU استفاده کنید که می تواند تأثیر منفی بر عملکرد خوشه داشته باشد. برای انجام اقدامات اصلاحی می توانید بر روی این متریک نظارت و هشدار دهید.

تعداد بسته های شکل گرفته به دلیل PP های دو طرفه از حداکثر برای کارگزار فراتر رفته است.

بعد از تولید کننده/مصرف کننده.

تعداد کل بایت های منتقل شده به ذخیره سازی مرتب شده ، از جمله داده های بخش های ورود به سیستم ، فهرست ها و سایر پرونده های کمکی. این متریک شامل تمام بخش های موضوعی است که به ترافیک انتقال داده های بالادست کمک می کند. دسته: نرخ ترافیک و خطا. این یک متریک KIP-405 است.

بعد از تولید کننده/مصرف کننده.

تعداد کل بایت های منتقل شده از ذخیره سازی مرتب شده در پاسخ به واکشی های مصرف کننده. این متریک شامل تمام بخش های موضوعی است که به ترافیک انتقال داده های پایین دست کمک می کند. دسته: نرخ ترافیک و خطا. این یک متریک KIP-405 است.

بعد از اینکه خوشه به حالت فعال رسید.

تعداد بخش های TCP ورودی و خروجی را با مجموعه پرچم SYN نشان می دهد.

ترافیک شبکه را در بایت های کلی بین مشتری (تولید کنندگان و مصرف کنندگان) و کارگزاران نشان می دهد. ترافیک بین کارگزاران گزارش نشده است.

تعداد درخواست های عملیاتی خواندن و نوشتن در انتظار تکمیل در یک دوره زمانی مشخص است.

تعداد بایت های خوانده شده در یک دوره زمانی مشخص.

تعداد عملیات خواندن در یک دوره زمانی مشخص.

تعداد کل ثانیه های صرف شده توسط کلیه عملیات خوانده شده که در یک دوره زمانی مشخص انجام شده است.

تعداد کل ثانیه های تمام شده توسط کلیه عملیات نوشتن که در یک دوره زمانی مشخص انجام شده است.

تعداد بایت های نوشته شده در یک دوره زمانی مشخص.

تعداد عملیات نوشتن در یک دوره زمانی مشخص.

PER_TOPIC_PER_BROKER نظارت بر سطح

هنگامی که سطح مانیتور را روی per_topic_per_broker تنظیم می کنید ، علاوه بر تمام معیارهای موجود در سطح per_broker و پیش فرض ، معیارهای شرح داده شده در جدول زیر را نیز دریافت می کنید. فقط معیارهای سطح پیش فرض رایگان هستند. معیارهای موجود در این جدول ابعاد زیر را دارند: نام خوشه ای ، شناسه کارگزار ، موضوع.

برای یک خوشه Amazon MSK که از Apache Kafka 2. 4. 1 یا نسخه جدیدتر استفاده می کند ، معیارهای موجود در جدول زیر فقط پس از اولین بار مقادیر آنها غیرزرو می شوند. به عنوان مثال ، برای دیدن Bytesinpersec ، ابتدا باید یک یا چند تولید کننده داده را به خوشه ارسال کنند.

بعد از ایجاد یک موضوع و موضوع در حال تولید/مصرف است.

تعداد بایت های منتقل شده به ذخیره سازی Tiered ، برای موضوع مشخص شده و کارگزار. این متریک شامل تمام پارتیشن های مربوط به موضوع است که به ترافیک انتقال داده بالادست در کارگزار مشخص شده کمک می کند. دسته: نرخ ترافیک و خطا. این یک متریک KIP-405 است.

تعداد بایت های منتقل شده از ذخیره سازی مرتب شده در پاسخ به واکنهای مصرف کننده برای موضوع مشخص شده و کارگزار. این متریک شامل تمام پارتیشن های مربوط به موضوع است که به ترافیک انتقال داده های پایین دست در کارگزار مشخص شده کمک می کند. دسته: نرخ ترافیک و خطا. این یک متریک KIP-405 است.

مانیتور سطح per_topic_per_partition

هنگامی که سطح مانیتور را روی per_topic_per_partition تنظیم می کنید ، علاوه بر تمام معیارهای موجود از per_topic_per_broker ، per_broker و سطح پیش فرض ، معیارهای شرح داده شده در جدول زیر را نیز دریافت می کنید. فقط معیارهای سطح پیش فرض رایگان هستند. معیارهای موجود در این جدول ابعاد زیر را دارند: گروه مصرف کننده ، موضوع ، پارتیشن.