خدمات تصور بيانات AWS: لوحات المعلومات وBI تتم بشكل صحيح
خدمات تصور بيانات AWS للوحات المعلومات وBI. ما يتطلبه الأمر لإنشاء تحليلات موثوقة على AWS، وخط الأنابيب وراء كل لوحة معلومات جيدة.
أظهر لنا فريق مالي ذات مرة لوحة تحكم AWS جميلة أنشأها البائع الأخير. الرسوم البيانية النظيفة والألوان المناسبة والمديرون التنفيذيون يحبونها. كان الأمر خاطئًا أيضًا - تم سحب اثنين من الأرقام الرئيسية من جدول لم يتم تحديثه منذ أسابيع، ولم يستطع أحد معرفة ذلك لأن لوحة القيادة لم تقل ذلك أبدًا. هذا هو الدرس الكامل لتصور البيانات على AWS في قصة واحدة: الرسم البياني هو الجزء السهل، والرسم الجميل المبني على خط أنابيب معطل أسوأ من عدم وجود لوحة معلومات على الإطلاق.
خط الأنابيب خلف لوحة تحكم جيدة
يقع كل تصور موثوق به على قمة سلسلة لا يراها معظم الناس أبدًا. يتم استيعاب البيانات من مصادرك - قواعد البيانات وأدوات SaaS والملفات. تهبط في المخزن، عادةً S3. يتم تنظيفها وإعادة تشكيلها، لأن البيانات الأولية دائمًا ما تكون أكثر فوضوية مما يعترف به أي شخص. يتم تصميمه في مقاييس تعني شيئًا واحدًا ثابتًا. عندها فقط تصل إلى الرسم البياني.
يمكنك تخطي أو تسريع أي من هذه الخطوات وستظل لوحة التحكم تظهر - إنها تعرض شيئًا غير صحيح. تكمن القيمة الهندسية في الطبقات السفلية، وهو بالضبط المكان الذي تؤدي فيه أعمال لوحة القيادة الرخيصة إلى الزوايا.
كيف يبدو مكدس AWS
تعتمد الخدمات المحددة على بياناتك، ولكن الشكل ثابت:
- S3 كمنزل دائم ورخيص للبيانات الخام والمعالجة
- مستودع أو محرك استعلام - Redshift أو Athena يستفسر عن S3 مباشرةً - للتحليل على نطاق واسع
- خطوة تحويل تقوم بتنظيف البيانات ونمذجتها وفقًا لجدول زمني
- طبقة تصور - QuickSight لـ BI القياسي، أو لوحة معلومات مضمنة مخصصة عندما تنتمي البيانات إلى منتجك الخاص
- ** الجدولة والمراقبة** حتى يمكن التنبؤ بالتحديثات ويتم ملاحظة حالات الفشل
إن تجميعها على AWS بدلاً من منصة واحدة شاملة يجعلك تتحكم في التكلفة مع نمو البيانات ويتيح لكل طبقة أن تكون الأداة المناسبة بدلاً من أي حزمة مضمنة.
BI مستقل أو مضمن
يريد بعض العملاء مساحة عمل BI يقوم المحللون بتسجيل الدخول إليها. يريد البعض الآخر وضع المخططات داخل التطبيق أو البوابة الإلكترونية الخاصة بهم، لذلك لا يترك المستخدمون المنتج أبدًا لرؤية أرقامهم. نقوم بالأمرين معًا - المسار المضمن يعني واجهة أمامية مخصصة في React و Node تقع على نفس خط أنابيب AWS، وهو نوع عمل البيانات الكامل الذي نبنيه بانتظام.
كيفية التمييز بين لوحة تحكم عاملة وأخرى جميلة
ثلاث شيكات تقوم بفرزها بسرعة. هل تتوافق الأرقام مع مصدر تثق به بالفعل؟ هل يتم تحديثه وفقًا لجدول يمكنك تسميته، وهل يخبرك بموعد آخر تحديث له؟ هل يُقرأ مقياس معين بشكل متماثل في كل مكان يظهر فيه؟ لوحة القيادة التي تجتاز تلك الأشياء تقوم بعملها. إحدى الطرق التي تفشل في أي منها هي عرض الشرائح مع عرض الأزياء التنكرية للبيانات الحية - ولن تكتشف ذلك إلا عندما يتم اتخاذ قرار بشأن رقم قديم.
أسئلة متكررة
المخطط المرئي هو الخطوة الأخيرة. قبل أن يأتي الأمر باستيعاب البيانات من مصادرك وتخزينها وتنظيفها وتحويلها ونمذجتها إلى مقاييس موثوقة. تبدو لوحة القيادة المبنية على خط أنابيب مهتز جيدة وتقع بثقة. يذهب معظم الجهد الهندسي إلى الطبقات التي لا يراها أحد.
تستخدم الحزمة النموذجية S3 للتخزين، ومستودعًا مثل Redshift أو الاستعلامات عبر S3 للتحليل، وخطوة معالجة لتنظيف البيانات وإعادة تشكيلها، وطبقة التصور مثل QuickSight أو لوحة معلومات مخصصة مضمنة. تعتمد القطع الدقيقة على حجم البيانات الخاصة بك وكيف يجب أن تكون الأرقام حية.
تحقق مما إذا كانت الأرقام تتوافق مع مصدر تثق به، وما إذا كانت يتم تحديثها وفقًا لجدول معروف، وما إذا كان المقياس نفسه يقرأ نفس الشيء في كل مكان يظهر فيه. لوحة التحكم التي لا يمكن ربطها ببيانات المصدر أو التي تحدد «الإيرادات» بشكل مختلف على شاشتين هي الزخرفة وليس التحليلات.
نعم. بالإضافة إلى أدوات BI المستقلة، يمكن تضمين التصورات مباشرة في منتجك أو البوابة الداخلية حتى لا يغادر المستخدمون تطبيقك لرؤية بياناتهم. هذا يعني عادةً واجهة أمامية مخصصة مدعومة بنفس خط أنابيب AWS، الذي نبنيه في React و Node.