هذا هو الجزء الأول من سلسلة من جزأين.

الجزء الأول - بناء مستودع بيانات

في الوقت الحاضر ، يريد الجميع إنشاء مستودع بيانات. لكن هل يحتاجها المرء حقا؟ حتى لو كنت في حاجة إليها ، كيف تعرف أنك تبني الشيء الصحيح ومتى ستبدأ حقًا في جني الفوائد المبكرة منه؟

لكن أول الأشياء أولاً ، ما هو مستودع البيانات؟ ببساطة ، إنه مكان واحد حيث يمكنك تخزين البيانات من جميع المصادر. يساعد الفرد في الإجابة على الأسئلة التي تتطلب تحليلًا معقدًا يتضمن بيانات من مصادر متعددة. يمكنك أيضًا إنشاء مستودع بيانات بطريقة تلبي متطلبات البيانات الأكثر شيوعًا لديك بسرعة.

قبل عام ، كنا نكافح مع هذا السؤال في UpGrad - لبناء أو عدم بناء مستودع بيانات؟

للإجابة على هذا السؤال والعديد من الأسئلة الأخرى ، تحدثنا إلى الكثير من الأشخاص الآخرين الذين فعلوا ذلك من قبل. أول ما لاحظناه هو أنه لبناء مستودع بيانات (أو DW) ، فأنت بحاجة إلى الفريق المناسب من مهندسي البيانات والمهندسين المعماريين والمحللين ومديري المنتجات. كان السؤال الأول الذي طرحناه هو - هل حقًا يستحق هذا القدر من الاستثمار؟

للعثور على الإجابة الصحيحة ، نحتاج إلى أن نسأل أنفسنا المجموعة الصحيحة من الأسئلة. قد تستغرق هذه الأسئلة قدرًا كبيرًا من الوقت والطاقة ، ولكن بمجرد الانتهاء من هذه الأسئلة ، ستكون أكثر ثقة فيما إذا كنت ستمضي قدمًا مع DW أم لا. هنا ، سنقدم الإجابات التي حصلنا عليها من تمريننا الخاص لتعزيز فهمك ، ونأمل أن نساعدك في هذه العملية لتقرير ما إذا كنت تريد إنشاء مستودع بيانات خاص بك أم لا.

السؤال رقم 1: ما الإجابات التي تريد الحصول عليها من التحليلات / البيانات؟ وبأي تردد؟

كما لاحظت بالفعل ، هذا هو السؤال الأكثر أهمية على الإطلاق. يجب عليك إشراك فرق أخرى (مبيعات ، تسويق ، أعمال) أثناء الإجابة على هذه الأسئلة للتأكد من أنك لن تفوت أي شيء.

ماذا يعني هذا بالنسبة لنا : أردنا 3 إجابات مهمة من التحليلات / البيانات:

أ. ما هي القنوات في التسويق التي تؤدي أداءً جيدًا ، أي الإسناد متعدد القنوات؟

يستخدم فريق التسويق في UpGrad قنوات مختلفة ، سواء عبر الإنترنت أو في وضع عدم الاتصال ، لاكتساب المستخدمين. نحن نعقد ورش عمل وفعاليات غير متصلة بالإنترنت للمهنيين الذين يسعون للحصول على ترقية وظيفية. نستخدم أيضًا قنوات على الإنترنت مثل Facebook و Google لجذب هؤلاء المحترفين. لذلك يصبح من المهم جدًا بالنسبة لنا معرفة القنوات التي تعمل بشكل جيد ، من أجل صياغة إستراتيجيتنا التسويقية على أساس أسبوعي أو حتى يومي. علاوة على ذلك ، نريد أيضًا معرفة ما إذا كان لإعادة التسويق أو الجهود غير المتصلة بالإنترنت أي تأثير على تحويل هؤلاء المستخدمين إلى طلاب مدفوعين.

ب. كيف يبدو مسار التحويل لدينا ؟

يبدو القمع الخاص بنا أكبر بكثير من معظم الشركات. الزيارة الأولى - التسجيل - بدء الطلب - تقديم الطلب - تم الاختبار / معفى - قائمة مختصرة - مدفوعة. من الأهمية بمكان معرفة شكل مسار التحويل استنادًا إلى العديد من الميزات المختلفة مثل المدينة والفئة العمرية وقناة الاستحواذ وما إلى ذلك.

ج. هل يمكننا توقع ما إذا كان المستخدم سينتهي بالدفع أم لا ، أي يؤدي إلى تسجيل النقاط ؟

يمكن أن يعتمد تسجيل النقاط الرئيسية على شيئين - الملاءمة والفائدة. يتم تحديد الملاءمة من خلال سمات المستخدم مثل سنوات الخبرة ودرجات GRE / GMAT / CAT وما إلى ذلك. يعتمد الاهتمام على مدى نشاط المستخدم على موقع الويب ، أو مدى استجابة المستخدم للمكالمات أو رسائل البريد الإلكتروني.

بصرف النظر عن هؤلاء ، أردنا:

د. تتبع أداء كل طالب في دورة أو برنامج حتى نتمكن من مساعدتهم في الوقت المناسب.

ه. مراقبة تقييمات الطلاب ومراجعاتهم لمحتوى الدورة.

لقد تلقينا الكثير من هذه الأسئلة من فرق مختلفة ... لكنك حصلت على الفكرة.

السؤال رقم 2 : أي من هذه الإجابات يتم توفيرها بالفعل من خلال الإعداد الحالي ، أم أنها تتطلب الحد الأدنى من التعديلات؟

سوف يمنحك طرح هذا السؤال فكرة جيدة عن إمكانيات قاعدة البيانات الحالية. تأكد من وجود المهندسين المناسبين في الغرفة عندما تسأل هذا (تلميح: معظم هؤلاء سيكونون مهندسي الواجهة الخلفية في شركة ناشئة الذين يعتنون بقاعدة بيانات المعاملات).

ماذا يعني هذا بالنسبة لنا :

أ. متعدد القنوات الإسناد

قبل إجراء عملية شراء ، يقوم الزوار بزيارات عديدة من خلال قنوات مختلفة. في بعض الأحيان يجدونك ببساطة على Google ويأتون إلى موقع الويب الخاص بك ، وأحيانًا يأتون لحضور حدث ترويجي دون اتصال بالإنترنت. لذلك عندما يشتري الزائر المنتج أخيرًا ، نريد أن نكون قادرين على تحديد القنوات الأكثر فاعلية. للقيام بذلك ، يتعين علينا دمج كل من البيانات المتصلة بالإنترنت وغير المتصلة * في مكان واحد وتشغيل نماذج إحالة مختلفة.

ب. قمع التحويل

يتضمن مسار التحويل الخاص بنا مرة أخرى بعض المكونات غير المتصلة بالإنترنت ، مثل القوائم المختصرة والاختبارات التي يتم تحميلها يدويًا إلى Salesforce بواسطة الفريق الاستشاري. يتطلب مسار التحويل دمج بيانات تدفق الويب مع بيانات Salesforce.

ج. يؤدي التهديف

معظم أدوات تسجيل النقاط الرئيسية هي أدوات أساسية. على سبيل المثال ، يمكنك التسجيل على أساس الأحداث المتدفقة في Pardot (بواسطة Salesforce). كنا بحاجة إلى نظام يمكنه دمج البيانات من Salesforce وتحليلات الويب ورسائل البريد الإلكتروني لإعطاء النتيجة النهائية بناءً على الملاءمة والاهتمام.

د. أداء الطالب

نظرًا لأنه يتم تخزين هذه البيانات في قاعدة بيانات للمعاملات ، يمكننا العثور على أداة تصور مثل BIME أو Tableau لسحب البيانات وإنشاء لوحات معلومات التتبع هذه.

ه. تقييمات ومراجعات الطلاب

مثل (د) أعلاه.

لذلك ، بدأنا في بناء مخطط مستودع بيانات ، مع الأخذ في الاعتبار أ و ب و ج. لا تتطلب العديد من الشركات الناشئة تسجيل نقاط العملاء المحتملين ولديها مصدر واحد فقط للبيانات لمسارات التحويل والإحالة. بالنسبة لتلك الشركات الناشئة ، تعد أداة ذكاء الأعمال (BI) أكثر فاعلية من إنشاء مستودع بيانات فعليًا.

السؤال رقم 3: هل ستبدو الأمور مختلفة عندما تقوم بالتوسع خلال العامين القادمين؟

على نطاق واسع ، قد تصبح قاعدة بيانات المعاملات الخاصة بك كبيرة جدًا ويمكن أن تصبح الاستعلامات أبطأ أو تبدأ في الفشل. يجب أن تخطط لمثل هذه المواقف أيضًا أثناء تصميم المستودع.

ماذا يعني هذا بالنسبة لنا:

سينمو جدول قاعدة بيانات الأنشطة الطلابية لدينا بسرعة كبيرة حيث نضيف المزيد من الدورات والطلاب. بدأت الاستعلامات في التباطؤ بالفعل. من المنطقي وضع ذلك في الاعتبار أثناء تصميم المخطط.

السؤال رقم 4 : هل هناك أي مكان آخر تريد إرسال البيانات التي تريدها في مستودع البيانات الخاص بك؟

قد تحتوي البيانات المخزنة في المستودع على العديد من حالات الاستخدام المختلفة ، باستثناء الحالة الرئيسية. تساعدك حالات الاستخدام هذه على التفكير في المخطط ، وتضمين حقول إضافية ، إذا لزم الأمر ، أثناء إنشاء المخطط.

ماذا يعني هذا بالنسبة لنا:

يستخدم فريق الاستشارات درجة العميل المتوقع ، لذلك يتعين علينا إرسال هذا إلى Salesforce. يمكن أيضًا استخدام النتيجة الملائمة لتسجيل نقاط العميل المتوقع بواسطة فريق دورة معين لإعفائهم تلقائيًا من الدورة التدريبية. يستخدم فريق التسويق نموذج الإحالة ، لذا يتعين علينا إرساله إلى أداة BI بتنسيق معين.

أخيرًا ، السؤال رقم 5 : هل لديك الفريق المناسب لاتخاذ قرارات مثل:

1. ما هي قاعدة بيانات التحليلات التي يجب عليك استخدامها ، بناءً على الحجم وحالات استخدام التحليلات؟
2. ما الذي يجب أن يكون نموذج المخطط / البيانات لحالات الاستخدام الحالية؟ هل هذا المخطط قابل للتحجيم؟
3. ما نوع ETL المطلوب لإنشاء قاعدة بيانات التحليلات؟ كم من الوقت سيستغرق ETL؟
4. ماذا سيكون تكرار تحديث الجداول المختلفة؟ كيف يجب أن تتعامل مع حالات الاستخدام في الوقت الفعلي ، مثل حالة محركات التوصية؟

ستحتاج إلى مهندس بيانات ، مهندس كبير عمل بالفعل مع البيانات لمدة 3-5 سنوات على الأقل ، وعالم بيانات لاتخاذ العديد من هذه القرارات.

بعد التفكير في هذه الأسئلة الخمسة ، يمكن للشركة الناشئة أن تقرر ما إذا كانت تريد إنشاء مستودع بيانات أم لا. فيما يلي قائمة بسيطة بإيجابيات وسلبيات مستودع البيانات ، لمساعدتك على إجراء المزيد من التقييم:

الايجابيات -

1. ستتمتع بالتحكم الكامل في بياناتك ، وستنتقل إلى أدوات الجهات الخارجية بسهولة عندما تصبح أكثر تكلفة بالنسبة لك أو لا تفي بمتطلباتك.
2. يمكنك بناء منتجات علوم البيانات! التوصيات والبحث وتحليل المشاعر والبريد العشوائي مقابل الخنزير وما إلى ذلك. كن حذرًا وتحقق مسبقًا مما إذا كنت ستحتاج إلى بيانات في الوقت الفعلي لهذه المنتجات ، أو أنها ستحتاج إلى تحديث كل ساعة / يوميًا.
3. كما أشرنا سابقًا ، يمكنك توفير الكثير من الوقت والمتاعب للمحللين. ستكون الاستعلامات أسرع ، وستكون البيانات موثوقة.

سلبيات -

1. تحتاج إلى الاستثمار في الموارد الهندسية وتخزين البيانات بشكل كبير ، قبل أن تتمكن من جني الفوائد بوقت طويل.
2. الاحتمالات هي أن بنائك الأول سيكون بعيدًا عن الكمال. إذا كنت تعمل في مرحلة مبكرة إلى متوسطة ، فلا يزال هناك الكثير من العمليات التي تتطور. لا يمكنك تغطية الحالات التي ستظهر في الأشهر الثلاثة أو الستة القادمة. قد تؤدي مواجهة أسئلة مثل لماذا لم نفكر في ذلك ، وما إلى ذلك ، إلى تثبيط عزيمتك. سوف تحتاج إلى التخلص من هذه النكسات الصغيرة ، وإبقاء عينيك على الهدف طويل المدى.
3. لا تمتلك معظم المؤسسات البحث الصحيح والصبر لبناء حل مستودع البيانات لاحتياجاتهم. ستحتاج إلى استثمار الكثير من الوقت قبل البدء في كل شيء.

بمجرد الانتهاء من هذا التمرين ، أنا متأكد من أنك ستكون جاهزًا للشروع في رحلة تحليل البيانات لبدء التشغيل الخاص بك وستتجنب الأخطاء المكلفة. قم بالتعليق أدناه وأخبرنا إذا أعجبك هذا المنشور أو وجدته مفيدًا. ترقبوا القادم!

* إذا كانت لدينا قنوات على الإنترنت فقط ، فربما استخدمنا تحليلات جوجل متعددة القنوات. لدينا أيضًا بيانات الأحداث غير المتصلة بالإنترنت ، والتي يمكن تحميلها إلى تحليلات جوجل. تم حل المشكلة؟ واحسرتاه! تمنعك GA من إرسال أي معلومات تعريف شخصية. في غياب معلومات البريد الإلكتروني ، من الصعب ربط هذه البيانات بمصادر البيانات الأخرى ، ما لم تقم بتعيين معرف تحليلات google إلى رسائل البريد الإلكتروني في قاعدة البيانات الخاصة بك ، والبحث عن هذه المعرفات وتحميل البيانات دون اتصال بالإنترنت باستخدام هذه المعرفات في GA.