قامت Amazon Web Services (AWS) بالإعلان عن تجربة تحليلية متكاملة جديدة وتكامل بدون ETL بين Amazon CloudWatch وAmazon OpenSearch Service. يبسط هذا التكامل تحليل بيانات السجلات وتصورها دون ازدواجية البيانات، مما يُبسط إدارة السجلات مع تقليل النفقات الفنية وتكاليف التشغيل. يمكن لعملاء CloudWatch Logs الآن الوصول إلى لغتي استعلام إضافيتين إلى جانب CloudWatch Logs Insights QL، بينما يمكن لعملاء OpenSearch الاستعلام عن سجلات CloudWatch في مكانها دون إنشاء خطوط أنابيب استخراج وتحويل وتحميل (ETL) منفصلة.
أثار هذا التكامل اهتمامي بشكل خاص بسبب قدرته على تبسيط تحليل السجلات. كمهندس بيانات، غالبًا ما أتعامل مع تحديات دمج مصادر البيانات المختلفة. إن إزالة الحاجة إلى خطوط أنابيب ETL لتكامل CloudWatch وOpenSearch يُعد تغييرًا لقواعد اللعبة. فهو لا يُبسط سير العمل فحسب، بل يُقلل أيضًا من الكمون المُرتبط بنقل البيانات ومعالجتها.
إحدى حالات الاستخدام المحددة التي أجدها مقنعة بشكل خاص هي القدرة على الاستعلام عن سجلات CloudWatch مباشرةً من OpenSearch Service. تخيل أنك تُحقق في مشكلة تتعلق بالأداء في تطبيقك. باستخدام هذا التكامل، يمكنك الآن دمج بيانات السجلات من CloudWatch مع بيانات أخرى في OpenSearch Service، مثل المقاييس أو تتبعات الطلبات، للحصول على عرض شامل للمشكلة. هذا يُمكنك من تحديد السبب الجذري للمشاكل بشكل أسرع وأكثر كفاءة.
بشكل عام، أعتقد أن هذا التكامل يُمثل خطوة كبيرة إلى الأمام في تبسيط تحليل السجلات وإدارتها. من خلال إزالة الحاجة إلى خطوط أنابيب ETL وتوفير واجهة موحدة للاستعلام عن البيانات، تُمكن AWS المؤسسات من الحصول على رؤى أعمق من بيانات السجلات الخاصة بها. أنا متحمس لرؤية كيف سيستخدم العملاء هذا التكامل لتحسين عملياتهم واكتساب ميزة تنافسية.
