آموزش جامع مبانی و مفاهیم داده کاوی و یادگیری ماشین

داده کاوی یکی از تخصص های به روز و مورد نیاز تقریبا تمام کسب و کارهای داده محور است. داده کاوی فرآیندی است که طی آن دیتای خام و بی مفهوم به اطلاعات مفید و با‌ ارزشی برای تصمیم گیری و تعیین اهداف استراتژیک مشخص سازمانی تبدیل می شوند.

داده کاوی یا دیتا ماینینگ در واقع علمی میان رشته ای است که علوم کامپیوتر، هوش مصنوعی، یادگیری ماشین، ریاضی و آمار را دربر می گیرد. با ساخت فرآیند داده کاوی، می توان دیتاهای حجیم و پیچیده سازمان ها و مؤسسات تحقیقاتی را کشف و الگوهای پنهان آن را تحلیل نمود.

به طور کلی می‌توان داده را برابر با طلا دانست. هر چقدر داده های موجود در پایگاه داده یک شرکت افزایش پیدا کند، سرمایه شرکت نیز بیشتر می شود. حال، برای تبدیل کردن این داده های حجیم و تمیز نشده به اطلاعات مفید و گزارشات مناسب برای تصمیم گیری، نیاز است تا از داده کاوی استفاده کرد تا با کشف الگو‌های پنهان از پردازش میلیون ها داده، نتایج شگفت انگیزی را بدست آورد و تحلیل کرد.

کاربردهای داده کاوی

• حوزه بازرگانی (بازاریابی مستقیم، بخش بندی بازار، رتبه بندی اعتباری و …)
• پزشکی (تشخیص سرطان و بازاریابی دارو)، نفت و گاز (حوزه استخراج و بهره برداری)
• بانک و بیمه (کشف تخلف و کلاهبرداری، مدیریت ریسک، افزایش صدور بیمه نامه و …)
• و…

یادگیری ماشین (Machine learning) را نیز می توان فرآیند بکارگیری هوش در سیستم یا ماشین بدون برنامه‌ نویسی آشکار (explicit programming) تعریف کرد.

در این دوره چه مباحثی آموزش داده شده است؟

در این دوره، به آموزش جامع مفاهیم داده کاوی پرداخته می شود و به طور کامل، مفاهیم مربوط با داده کاوی و یادگیری ماشینی را یاد خواهید گرفت.

سرفصل های دوره آموزش جامع مبانی و مفاهیم داده کاوی و یادگیری ماشین

فصل اول: معرفی دوره (آشنایی با مفاهیم اولیه)

• تعریف داده کاوی (data mining)
• اهمیت داده کاوی
• کاربرد داده کاوی در صنایع و کسب و کارهای مختلف
• تعریف فرآیند داده کاوی
• تعریف یادگیری ماشین (machine learning) و کاربرد آن در داده کاوی
• تفاوت میان داده کاوی و علم داده (data science)
• هدف دوره

فصل دوم: جبر خطی در داده کاوی و یادگیری ماشین

• تعریف جبر خطی
• اهمیت جبر خطی در داده کاوی
• بردارها و محاسبات برداری
• نرم برداری
• ماتریس‌ها و محاسبات ماتریس

فصل سوم: آشنایی با انواع دیتا

• دیتای ساختار یافته (Structured data)
• دیتای نیمه ساختار یافته (Semi-structured data)
• دیتای بدون ساختار (Unstructured data)

فصل چهارم: تحلیل آماری و رسم نمودار در داده کاوی و یادگیری ماشین

• آشنایی با انواع نمودار (پیاده سازی در پایتون)
• تعریف آمار و علم آمار
• ابزارهای مورد استفاده برای تهیه گزارش آماری
• آشنایی با شاخص‌های مرکزی و پراکندگی
• متغیرها
• همبستگی و ماتریس همبستگی
• نمودار پراکندگی (scatterplot)
• Crosstab
• توابع Aggregation
• آشنایی با مفهوم Group by
• استفاده از تابع Group by برای محاسبه فراوانی یک متغیر کیفی
• استفاده از نمودار هیستوگرام برای محاسبه فراوانی یک متغیر کمی
• مفهوم significance یا P-value
• آزمون های آماری پارامتریک
• آزمون های آماری ناپارامتریک
• تعریف نمونه گیری
• مزایا و معایب نمونه‌‎‌گیری دار داده کاوی
• انواع روش پرکاربرد نمونه گیری

فصل پنجم: پیش پردازش داده ها

• پر کردن مقادیر NULL (کمی، کیفی اسمی و ترتیبی)
• فیلتر کردن رکورد یا وِیژگی
• تولید ویژگی (feature generation)
• ساخت Dummy برای ویژگی‌های کیفی
• طبقه بندی مجدد مقادیر (Reclassification)
• Join
• Append
• بخش بندی دیتا (Train_Test_Split)
• نرمالسازی
• استاندارد سازی
• تعریف کاهش ابعاد
• اهمیت کاهش ابعاد
• تعریف انتخاب ویژگی (Feature selection)
• اهمیت انتخاب ویژگی
• انواع روش انتخاب ویژگی

فصل ششم: سری‌های زمانی

• تعریف سری زمانی
• تعریف برازش (Fitting) و پیش بینی (Forecasting)
• مدل ARIMA
• شاخص‌های نیکویی برازش
• میانگین
• خطای معیار (SE)
• R2 ایستایی
• میانگین مجذور خطا (RMSE)
• میانگین قدر مطلق درصد خطا (MAPE)
• ماکزیمم قدر مطلق درصد خطا (MAX PE)
• میانگین قدر مطلق خطا (MAE)
• ماکزیمم قدر مطلق خطا (MAX AE)
• معیار اطلاعاتی نرمال شده بیز (Normalized BIC)

فصل هفتم: رگرسیون خطی

• تعریف رگرسیون خطی
• رابطه خطی
• R Square
• خطای معیار تخمین
• فرضیه آماری آزمون معناداری کل مدل رگرسیون (به کمک جدول Anova)
• مقدار ثابت (B0)
• مقدار ضریب متغیر مستقل (B1)
• فاصله اطمینان
• Regularization
• مفهوم Overfitting

فصل هشتم: خوشه بندی (Clustering)

• تعریف خوشه بندی
• اهمیت خوشه بندی
• تفاوت خوشه بندی با کاهش ابعاد
• انواع روش خوشه بندی
• مفهوم distance / similarity
• Dendrogram
• مفهوم Agglomerative clustering
• مفهوم Linkage و انواع آن
• مفهوم Ward

فصل نهم: طبقه بندی (Classification)

• تعریف طبقه بندی
• تفاوت طبقه بندی با خوشه بندی
• اهمیت طبقه بندی
• آشنایی با الگوریتم‌های طبقه بندی، مفاهیم و کاربردهای آنها
• کارنامه طبقه بندی و ارزیابی مدل

فصل دهم: آنالیز RFM

• تعریف اولیه
• اهمیت RFM
• مفهوم Recency
• مفهوم Frequency
• مفهوم Monetary

فصل یازدهم: قواعد انجمنی

• آشنایی با مفاهیم قواعد انجمنی
• محاسبات مربوطه

لینک دوره های دیگر

• آموزش داده کاوی و یادگیری ماشینی با IBM SPSS modeler
• آموزش داده کاوی و یادگیری ماشینی با پایتون
• آموزش متن کاوی با پایتون
• آموزش یادگیری عمیق با پایتون
• پکیج آموزش جامع علم داده با پایتون
• آموزش داده کاوی با رپیدماینر
• آموزش تصویر کاوی با رپیدماینر
• آموزش متن کاوی و وب کاوی با رپیدماینر
• پکیج آموزش جامع علم داده با رپیدماینر RapidMiner
• آموزش جامع هوش تجاری BI و تحلیل داده با تبلو Tableau

حاصل دوره

• تسلط به مفاهیم فرآیند داده کاوی
• تسلط به مفاهیم جبر خطی و آمار در داده کاوی
• تسلط به مفاهیم پیش پردازش دیتا
• تسلط به الگوریتم های یادگیری ماشین (نظارتی و غیر نظارتی)
• تسلط به مفاهیم آنالیز RFM برای شناسایی مشتریان وفادار و سود آور