فن تحويل البيانات.. كيف تصنع الذهب من التراب؟ (Feature Engineering)

 

 


في المقال السابق، قمنا بتنظيف البيانات (غسلنا الخضار). اليوم، سنقوم بتقطيعها وتتبيلها لتصبح جاهزة للطبخ. هذا الفن يسمى "هندسة الخصائص" (Feature Engineering)، وهو السر الذي يميز المحترفين عن الهواة.

 

هل تعلم أن أغلى ما يملكه عالم البيانات ليس "الخوارزمية المعقدة"، بل هو "الإبداع" في تجهيز البيانات؟

الخوارزميات (Algorithms) في النهاية هي معادلات رياضية صماء. هي لا تفهم معنى "يوم الجمعة" ولا تعرف أن "لون السيارة أحمر" يعني شيئاً مميزاً. هي تفهم الأرقام فقط.

 

هنا يأتي دورك لترجمة الواقع البشري إلى لغة الأرقام التي تعشقها الآلة. هذه العملية تسمى "هندسة الخصائص".

 

1.المشكلة: البيانات الخام لا تكفي

تخيل أن لديك جدولاً فيه "تاريخ ميلاد" العملاء (مثلاً: 1990/5/20). إذا أعطيت هذا التاريخ كما هو للآلة، لن تستفيد منه شيئاً. الآلة لا تعرف التقويم.

الحل (هندسة الخصائص): بذكائك البشري، تقوم بعملية حسابية بسيطة: (تاريخ اليوم - تاريخ الميلاد) = "العمر" (35 سنة).

الآن، تحول "تاريخ جامد" إلى "معلومة ذهبية" (العمر). فجأة، يستطيع النموذج أن يكتشف أن "الشباب" يشترون هواتف أكثر من "كبار السن". هذا الاكتشاف لم يكن ليحدث لولا تدخلك.

 

2. سحر التواريخ: أكثر من مجرد أرقام

التاريخ يحمل أسراراً كثيرة إذا فككته:

هل هذا التاريخ يوافق "يوم جمعة"؟ (إذن قد تزيد المبيعات لأنه عطلة). هل هذا التاريخ في "شهر رمضان"؟ (تتغير أنماط الشراء تماماً). هل هو "فصل الشتاء"؟ (يزيد الطلب على الملابس الثقيلة).

مجرد عمود واحد اسمه "التاريخ" يمكن أن تستخرج منه 5 أو 6 أعمدة جديدة (خصائص جديدة) تجعل نموذجك عبقرياً.

 

3. معضلة الألوان: كيف نحول الكلمات إلى أرقام؟

الكمبيوتر لا يقرأ الكلمات. إذا كان لديك عمود "لون السيارة" (أحمر، أزرق، أخضر)، كيف تفهمه الآلة؟

لا يمكننا أن نقول: أحمر = 1، أزرق = 2، أخضر = 3. لماذا؟ لأن الآلة ستظن أن "الأخضر (3)" أكبر وأفضل من "الأحمر (1)"! وهذا خطأ رياضي، فالألوان ليس لها ترتيب.

 

الحل الذكي (One-Hot Encoding): نحول كل لون إلى "عمود منفصل" فيه (1 أو 0). عمود "هل هو أحمر؟": (1 نعم / 0 لا). عمود "هل هو أزرق؟": (0 لا / 1 نعم).

 

هكذا تفهم الآلة الفئات دون أن تقع في فخ الترتيب الخاطئ.

 

الخلاصة

لا ترمِ البيانات الخام داخل النموذج وتنتظر المعجزة.

البيانات مثل "النفط الخام"، قيمتها منخفضة حتى يتم تكريرها.

هندسة الخصائص هي عملية التكرير هذه. هي تحويل "التاريخ" إلى "موسم"، وتحويل "النص" إلى "شعور"، وتحويل "العنوان" إلى "منطقة جغرافية".

 

تذكر القاعدة الذهبية:

خصائص قوية + خوارزمية بسيطة = نتائج ممتازة.

خصائص ضعيفة + خوارزمية معقدة = نتائج عشوائية.

تعليقات

إرسال تعليق

المشاركات الشائعة من هذه المدونة

بداية الحكاية

صورة
    هناك بدايات لا تعلن نفسها بصوتٍ عالٍ، ولا تأتي على هيئة قرارات مصيرية . تبدأ كوميضٍ خفيف يعبر القلب، أو كحنينٍ لا نفهم سببه… لكننا نعرف أنه يشير إلى شيء ينتظرنا .   نمرّ بلحظات نشعر فيها أن ما اعتدناه لم يعد يكفينا، وأن الروح مهما تظاهرنا بالثبات تتوق إلى مساحة أوسع، إلى طريق نختبر فيه أنفسنا من جديد، إلى حياة نكون فيها أقرب لما نطمح، لا لما اعتدناه   البدايات ليست هيئة الأشياء… بل نبرة داخلية ذلك الصوت الذي يخبرك أن هناك شيئًا أجمل ينتظرك، شيئًا يشبهك أكثر، ويهتم لأجلك أكثر مما تفعل أنت لنفسك أحيانًا   البداية ليست خطوة … البداية نية رغبة صادقة في أن نُعيد ترتيب أيامنا، أن نمنح أنفسنا فرصة، أن نؤمن بأن التغيير يبدأ من الداخل قبل أن يلمسه العالم من حولنا وحين تشتعل النية … يبدأ الكون يفتح لنا الأبواب التي كُنّا نظنها مغلقة، وتظهر علامات صغيرة تقودنا بلا ضجيج   نحو الطرق التي خُلقنا لنمرّ بها نلتقي أشخاصًا يساعدوننا، وتتساقط أشياء لم تعد تناسبنا، ويكبر في داخلنا ضوءٌ لم نعرف أننا نحمله   لأن كل ...
قراءة المزيد

حين اخترت أن أسمو

صورة
      هناك بدايات لا تصنع ضجيجًا، ولا تأتي على هيئة حدث كبير… بل تمرّ كهمسة، كضوء خفيف يعبر القلب ثم يترك أثرًا لا يمكن تجاهله بدايات سلسة خفيفة ، لكنها تغيّر اتجاه الروح   لم يكن السمو قرارًا صريحًا، ولا لحظة إعلان، بل كان استجابة لنداء داخلي يطلب منّي أن أرى الحياة من زاوية أخر زاوية أليق بها، وتشبه ما أحتاجه حقًا   أحيانًا نكبر فجأة… ليس لأن شيئًا مدهشًا حدث، بل لأننا توقّفنا عن العيش بطريقة تؤذينا، وقررنا أن نمنح أنفسنا فرصة أن نصبح أقرب لما نتمناه، لا لما اعتدنا عليه   كنت أعرف في تلك اللحظة الصامتة أن ما أتجاوزه دون مواجهة يعود إليّ ثِقلاً، وأن ما أواجهه بصدق يعود إليّ نورًا ونقاءً. وحين اخترتُ أن أسمو، كنت أختار أن أرتفع فوق النسخة التي سمحتُ لها أن تجرّني للخلف، وأقترب من النسخة التي أعرف في داخلي أنها الأحق بقيادة حياتي   السمو ليس ارتفاعًا فوق الآخرين… بل ارتفاعًا فوق ما يُطفئك. فوق العادات التي تستنزفك، والعلاقات التي تستهلك طاقتك، والأفكار التي تحاصرك، والأماكن التي كبرتِ عليها ولم ت...
قراءة المزيد

عندما تُغاث الروح

صورة
    هناك لحظات لا تأتي كثيرًا في العمر، لحظات لا تشبه الفرج المعتاد ولا تشبه الحلول المنطقية . إنها اللحظات التي تُغاث فيها الروح… حين يتدخل لطفٌ خفيّ، لا يُرى بالعين، لكنه يُمسّ كما لو أنه يُعيد ترتيب نبض الإنسان من جديد .   الإغاثة الروحية ليست حدثًا خارجيًا؛ إنها حركة داخلية عميقة، تبدأ حين يتعب القلب من محاولات الفهم، وحين تصل الروح إلى نقطة لا تعرف فيها هل تمضي… أم تتوقف لتتعافى .   وفي تلك النقطة تحديدًا، تأتي الإغاثة .   تأتي بلا ضجيج، بلا إعلان، بلا خطوات تمهيدية . تأتي كأن الله يقول للنفس المنهكة: قد رأيتُك، ولم أتركك لحظة واحدة .   الإغاثة ليست معجزة تحدث فجأة، بل تغيرٌ خفيّ يبدأ بتبدل الإحساس : تنام وأنت مثقل، وتستيقظ وقلبك أخف . تدخل يومك بارتباك، وتجد صدرك أوسع بلا سبب . تظن أن كل شيء كما هو… لكنك لست كما كنت .   عندما تُغاث الروح، تتغير طريقة النظر إلى الأشياء . تُعاد قراءة خساراتٍ كنت تراها قاسية، فتكتشف أنها كانت تمهيدًا لطريق آخر . تتلاشى الحاجة إلى التفسيرات، ويتجدد الإيمان بأن ما يختاره الله لل...
قراءة المزيد