👨‍🎓 کد درخت تصمیم از پایه (Scratch)

برای پیاده سازی یک درخت تصمیم از Scratch در زبان برنامه‌نویسی پایتون، به چند جزء اصلی نیاز داریم:

کلاس Node: این کلاس به عنوان نماینده‌ی هر گره در درخت تصمیم عمل می‌کنه. این گره‌ها شامل اطلاعاتی درباره‌ی شاخص ویژگی‌ها برای تقسیم (feature_index)، آستانه‌ی تقسیم (threshold)، و گره‌های فرزند چپ و راست (left و right) هستن. همچنین، این کلاس میزان افزایش اطلاعات ناشی از هر تقسیم (info_gain) و پیش‌بینی‌های نهایی برای گره‌های برگ (value) رو داراست.

class Node:
    def __init__(self, feature_index=None, threshold=None, 
        left=None, right=None, info_gain=None, value=None):

        self.feature_index = feature_index
        self.threshold = threshold
        self.left = left
        self.right = right
        self.info_gain = info_gain
        self.value = value

کلاس DecisionTreeClassifier: این کلاس هسته‌ی الگوریتم درخت تصمیم رو تشکیل می‌ده. متد سازنده (Constructor) پارامترهایی مثل حداکثر عمق درخت (max_depth) و حداقل تعداد نمونه‌ها برای یک گره (min_samples_split) رو مشخص می‌کنه. تابع build_tree مسئول ساخت درخته و به صورت بازگشتی بهترین تقسیم رو بر اساس افزایش اطلاعات انتخاب می‌کنه. تابع predict برای پیش‌بینی کلاس‌های نمونه‌های جدید استفاده می‌شه.

class DecisionTreeClassifier:
    def __init__(self, min_samples_split=2, max_depth=2):

        self.min_samples_split = min_samples_split
        self.max_depth = max_depth

    def build_tree(self, dataset, curr_depth=0):
        pass

    def train(self, X, Y):
        pass

    def predict(self, X):
        pass

توابع کمکی: تابع entropy برای محاسبه انتروپی استفاده می‌شه که میزان ناخالصی در یک مجموعه داده‌ رو نشون می‌ده. انتروپی بالا به معنای وجود تنوع بیشتر در برچسب‌های داده‌هاست، و انتروپی پایین نشون‌دهنده یکنواختی بیشتر در برچسب‌هاست.

تابع calculate_info_gain برای محاسبه افزایش اطلاعات یک تقسیم مشخص در درخت استفاده می‌شه. افزایش اطلاعات معیاری برای اندازه‌گیری میزان بهبودی هست که یک تقسیم مشخص در پیش‌بینی برچسب‌ها ایجاد می‌کنه.

تابع best_split این تابع کمک می‌کنه تا بهترین نقطه تقسیم برای داده‌ها رو بر اساس معیار افزایش اطلاعات یا شاخص جینی پیدا کنیم. این تابع از بین همه ویژگی‌ها و آستانه‌های ممکن، تقسیمی رو انتخاب می‌کنه که بیشترین افزایش اطلاعات رو به دست بیارن.

def entropy(y):

    class_labels = np.unique(y)
    entropy = 0
    for cls in class_labels:
        p = len(y[y == cls]) / len(y)
        entropy -= p * np.log2(p)
    return entropy

def calculate_info_gain(dataset, feature_index, threshold):
    pass

def best_split(dataset, num_features):
    pass

❗️توجه داشته باشین که کدهای گذاشته شده قطعه کد هستن و فقط به صورت کلی توابع لازم برای پیاده سازی درخت تصمیم رو توضیح دادن و با اجراشون خروجی نخواهید داشت.

#Machine_Learning
#Decision_Tree

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

💡درخت Bagging چیه؟

درخت بگینگ (Tree Bagging) یک روش یادگیری گروهی (Ensemble learning) که در اون چندین درخت تصمیم‌گیری به صورت مستقل از داده‌های آموزشی که به صورت تصادفی انتخاب شدن (Bootstrap Aggregating)، آموزش داده می‌شن و بعد پیش‌بینی‌هاشون باهم ترکیب می‌شه تا یک مدل نهایی با عملکرد بهتر، کمتر دچار بیش‌برازش شه. این روش با کاهش واریانس پیش‌بینی‌ها، مدلی توانمندتری ایجاد می‌کنه و برای مجموعه‌های داده بزرگ که دارای نویز و ابهام هستن، مفیده.

#Machine_Learning
#Decision_Tree

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

👨‍🎓 درخت تصمیم در Sklearn

درخت تصمیم بر اساس ساختار شاخه‌ای و برگ‌ها کار می‌کنه. هر شاخه نشون‌دهنده یک تصمیم و هر برگ نشون‌دهنده یک دسته‌بندی یا پیش‌بینی مقداره. در ادامه، نحوه پیاده سازی درخت تصمیم در scikit-learn رو بررسی می‌کنیم.

۱. وارد کردن کتابخانه‌ها و داده‌ها: اول کتابخانه‌های مورد نیاز وارد میشه.

import numpy as np
import pandas as pd
from sklearn.tree import DecisionTreeClassifier
from sklearn.model_selection import train_test_split
from sklearn.metrics import accuracy_score

۲. آماده‌سازی داده‌ها: داده‌ها برای مدل‌سازی آماده میشه. این مرحله شامل پاک‌سازی داده‌ها، جدا کردن ویژگی‌ها و برچسب‌ها و تقسیم‌بندی داده‌ها به دو مجموعه آموزشی و تسته.

X = data.iloc[:, :-1]
y = data.iloc[:, -1] 

X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42)

۳. ایجاد مدل و آموزش: یک شی از کلاس DecisionTreeClassifier ایجاد و با داده‌های آموزشی مدل آموزش داده میشه.

model = DecisionTreeClassifier()

model.fit(X_train, y_train)

۴. پیش‌بینی و ارزیابی مدل: با استفاده از مدل آموزش دیده روی داده‌های تست پیش‌بینی انجام داده و دقت مدل ارزیابی میشه.

predictions = model.predict(X_test)

accuracy = accuracy_score(y_test, predictions)
print(f"دقت مدل: {accuracy}")

🔵 نکات تکمیلی

🔵تنظیم پارامتر‌ها: امکان تنظیم پارامترهای مختلف برای تنظیم مدل درخت تصمیم وجود داره، مثل max_depth برای تعیین حداکثر عمق درخت، min_samples_split برای تعیین حداقل تعداد نمونه‌های مورد نیاز برای شاخه‌بندی بیشتر در یک گره، و criterion برای تعیین معیار کیفیت تقسیم (شاخص Gini و Entropy).

🔵پارامتر splitter: این پارامتر استراتژی تقسیم برای هر گره رو تعیین می‌کنه و دو حالت داره: best که هر گره رو به بهترین شکل ممکن تقسیم می‌کنه و random که تقسیمات رو به صورت تصادفی انتخاب می‌کنه.

🔵پارامتر min_samples_leaf: این پارامتر حداقل تعداد نمونه‌هایی که باید در هر برگ وجود داشته باشه رو تعیین می‌کنه. این مقدار برای کنترل overfitting مفیده.

🔵پارامتر max_features: تعداد ویژگی‌هایی که برای تقسیم در هر گره در نظر گرفته می‌شه رو مشخص می‌کنه. این پارامتر هم برای کنترل overfitting مفیده و سرعت محاسبات رو افزایش ده.

🔵پارامتر min_impurity_decrease: با تنظیم این پارامتر یک گره فقط وقتی تقسیم می‌شه که این تقسیم، ناخالصی رو بیش از حد معینی کاهش بده.

🔵پارامتر class_weight: این پارامتر برای مواردی که کلاس‌ها متعادل نیستن، استفاده می‌شه. مقداردهیش به صورت balanced یا به صورت دیکشنری وزن‌های خاص برای کلاس‌ها تنظیم میشه.

🔵بررسی اهمیت ویژگی‌ها: میشه اهمیت هر ویژگی در تصمیم‌گیری‌های مدل رو با استفاده از پارامتر feature_importances_ بررسی کرد.

🔵استفاده از گراف‌ها: برای درک بهتر ساختار درخت تصمیم، امکان استفاده از کتابخانه‌های مصورسازی مثل graphviz استفاده کرد تا گراف درخت به صورت بصری نمایش داده شه.

#Machine_Learning
#Decision_Tree

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

💡آیا max_depth در Scikit-learn کار هرس درخت تصمیم رو انجام میده؟

نه max_depth حداکثر تعداد گره هاییه که یک درخت تصمیم میتونه داشته باشه. این پارامتر برای جلوگیری از رشد بیش از حد درخت و کاهش پیچیدگی استفاده میشه. هرس، فرآیند حذف گره ها از یک درخت تصمیمه که برای بهبود دقت درخت و کاهش احتمال بیش برازش انجام شه.

برای هرس درخت تصمیم در Scikit-learn، میشه از تابع ().prune استفاده کرد. این تابع دو پارامتر ورودی criterion و max_depth رو میگیره. برای مثال برای هرس یک درخت تصمیم با استفاده از شاخص Gini و عمق حداکثر 5، میشه از کد زیر استفاده کرد:

from sklearn.tree import DecisionTreeClassifier

classifier = DecisionTreeClassifier()
classifier.fit(X_train, y_train)

pruned_classifier = classifier.prune(criterion="gini", max_depth=5)

#Machine_Learning
#Decision_Tree

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

⏰ پست‌های هفته‌ای که گذشت رو این‌جا پیدا کنین!

🔺 آموزشی

🔵تعریف درخت تصمیم
👉🔗 https://t.iss.one/data_ml/198

🔵اصول و مفاهیم Information Gain
👉🔗 https://t.iss.one/data_ml/201

🔵مقایسه شاخص Gini و Entropy
👉🔗 https://t.iss.one/data_ml/204

🔵کاربردها، مزایا و معایب درخت تصمیم
👉🔗 https://t.iss.one/data_ml/207

🔵کد درخت تصمیم از پایه (Scratch)
👉🔗 https://t.iss.one/data_ml/210

🔵درخت تصمیم در Sklearn
👉🔗 https://t.iss.one/data_ml/213

🔺 کوئیز

🔵کوئیز شماره ۵۶: انواع هرس کردن
👉🔗 https://t.iss.one/data_ml/199

🔵کوئیز شماره ۵۷: انتروپی گره‌های فرزندی
👉🔗 https://t.iss.one/data_ml/202

🔵کوئیز شماره ۵۸: شاخص جینی و انتروپی
👉🔗 https://t.iss.one/data_ml/205

🔵کوئیز شماره ۵۹: استفاده از درخت تصمیم‌ برای کاهش ابعاد
👉🔗 https://t.iss.one/data_ml/208

🔵کوئیز شماره ۶۰: مزیت استفاده از Bagging
👉🔗 https://t.iss.one/data_ml/211

🔵کوئیز شماره ۶۱: پارامتر Splitter
👉🔗 https://t.iss.one/data_ml/214

🔺 نکته

🔵مفهوم Tree Bagging
👉🔗 https://t.iss.one/data_ml/200

🔵ارتباط بین Information Gain و Information Gain Ratio
👉🔗 https://t.iss.one/data_ml/203

🔵شاخص جینی و بهره اطلاعاتی (انتروپی)
👉🔗 https://t.iss.one/data_ml/206

🔵الگوریتم CART
👉🔗 https://t.iss.one/data_ml/209

🔵درخت Bagging
👉🔗 https://t.iss.one/data_ml/212

🔵هرس کردن در Scikit-learn
👉🔗 https://t.iss.one/data_ml/215

#Weekend
#Machine_Learning
#Decision_Tree

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

👩‍🎓 برنامه آموزشی هفته: الگوریتم جنگل تصادفی یا Random Forest

🟠شنبه: مفهوم پشت جنگل در جنگل تصادفی

🔵یک‌شنبه: مفهوم پشت تصادفی در جنگل تصادفی

🟢دوشنبه: جنگل تصادفی در رگرسیون و طبقه‌بندی

🔴سه‌شنبه: کاربردها و مزایای جنگل تصادفی

🟠چهارشنبه: کد جنگل تصادفی از پایه (Scratch)

🔵پنج‌شنبه: جنگل تصادفی در Sklearn

🟢جمعه: جمع بندی

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

🟡 توضیحات وبینار رایگان یادگیری ماشین لرنینگ و تحلیل داده با ChatGPT

🔺 سرفصل‌ها

🔵نحوه اصولی پرامپت نویسی در ChatGPT
🔵شخصی سازی ChatGPT
🔵یادگیری ماشین لرنینگ با کمک ChatGPT
🔵تحلیل داده با ChatGPT
🔵دریافت برنامه مطالعاتی بلند و کوتاه مدت

📆 یکشنبه، ۸ بهمن ساعت ۱۹

🟢 رایگان ثبت‌نام کنین:‌
👉📎 https://ctdrs.ir/cr15311

@DSLanders | دی‌اس‌لندرز

👨‍🎓 مفهوم پشت جنگل در الگوریتم جنگل تصادفی

جنگل تصادفی (Random Forest) در گروه الگوریتم‌های باناظر قرار داره و برای حل مسائل طبقه‌بندی و رگرسیون استفاده می‌شه. این الگوریتم بر اساس ترکیب چندین درخت تصمیم کار می‌کنه و به عنوان یک روش یادگیری گروهی (Ensemble Learning) شناخته می‌شه.

هر درخت در "جنگل" سعی می‌کنه به طور مستقل یک پیش‌بینی انجام بده، و نتیجه‌ی نهایی بر اساس میانگین یا اکثریت آراء این درخت‌ها به دست میاد. ایده‌ی اصلی پشت این الگوریتم اینکه با استفاده از چندین درخت تصمیم به جای یک درخت تصمیم، بشه پیش‌بینی‌های دقیق‌تر و معتبرتری انجام داد.

🔵 چند نکته مهم

🔵در جنگل تصادفی، هر درخت به طور مستقل تربیت می‌شه. این درخت‌ها معمولاً با استفاده از یک نمونه‌ی تصادفی و مستقل از داده‌ها آموزش می‌بینن. این رویکرد باعث می‌شه که هر درخت تفاوت‌هایی با سایر درخت‌ها داشته باشه و به این ترتیب تنوع در جنگل افزایش پیدا می‌کنه.

🔵درختان تصمیم مستقل، هر کدوم پیش‌بینی‌هایی رو ارائه می‌دن، و نتیجه‌ی نهایی جنگل تصادفی از ترکیب این پیش‌بینی‌ها (معمولاً با رأی‌گیری اکثریت برای طبقه‌بندی یا میانگین برای رگرسیون) به دست میاد. این ترکیب‌سازی کمک می‌کنه تا اثر Overfitting هر یک از درخت‌ها به حداقل برسه.

🔵با ترکیب پیش‌بینی‌های چندین درخت، جنگل تصادفی معمولاً دقت بیشتری نسبت به یک درخت تصمیم تک داره و بهتر می‌تونه به داده‌های جدید تعمیم داده شه.

🔵عملکرد جنگل تصادفی به تعداد درختان، عمق هر درخت، تعداد ویژگی‌های بررسی شده در هر تقسیم و دیگر پارامترها بستگی داره. تنظیم این هایپرپارامترها برای بهینه‌سازی عملکرد الگوریتم مهمه.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

💡خطای Out-of-Bag چیه؟

خطای Out-of-Bag یک روش ارزیابی عملکرد برای الگوریتم‌های جنگل تصادفیه. در فرایند آموزش یک جنگل تصادفی، برای هر درخت تصمیم، یک نمونه‌گیری بوت‌استرپ از داده‌های آموزشی انجام می‌شه. یعنی بعضی از داده‌ها ممکنه چندین بار در نمونه‌گیری ظاهر شن، در حالی که بعضی دیگه اصلاً انتخاب نمی‌شن. داده‌هایی که در نمونه‌گیری برای یک درخت خاص استفاده نمی‌شن، خارج از کیسه (OOB) نام دارن.

پس از آموزش درخت، داده‌های OOB برای ارزیابی عملکرد اون درخت به کار می‌رن، چون این داده‌ها در آموزش درخت شرکت نداشتن. با استفاده از OOB برای هر درخت، خطای OOB محاسبه می‌شه و بعد خطاهای هر درخت در جنگل تصادفی میانگین‌گیری می‌شه تا خطای OOB کلی محاسبه شه.

مزیت این روش اینکه نیازی به جدا کردن یک مجموعه تست جداگانه نیست و میشه یک تخمین از خطای تعمیم رو بدون استفاده از داده‌های بیشتر به دست آورد. خطای OOB به عنوان یک روش در زمان تنظیم هایپرپارامترها کاربرد داره.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

👨‍🎓 مفهوم پشت تصادفی در جنگل تصادفی

در الگوریتم جنگل تصادفی، "تصادفی" به دو مکانیزم اصلی اشاره داره که برای افزایش تنوع در مدل‌های درخت تصمیم و کاهش بیش‌برازش استفاده می‌شه. این دو مکانیزم به این صورت هستن:

🔵تصادفی در انتخاب نمونه‌ها (Bootstrap Aggregating یا Bagging)

در جنگل تصادفی، هر درخت تصمیم بر اساس یک نمونه تصادفی از داده‌ها آموزش می‌بینه. این نمونه‌ها از طریق فرایندی به نام Bagging انتخاب می‌شن. در Bagging، نمونه‌های گوناگون با جایگذاری از مجموعه داده اصلی انتخاب می‌شن، به این معنی که هر نمونه می‌تونه بیشتر از یک بار انتخاب شه. در نتیجه باعث می‌شه که هر درخت تصمیم با توجه به بخشی متفاوت و منحصر به فرد از داده‌ها آموزش ببینه.

🔵تصادفی در انتخاب ویژگی‌ها

زمان ساخت هر گره در درخت‌های تصمیم، به جای بررسی تمام ویژگی‌ها برای انتخاب بهترین تقسیم، یک زیر مجموعه تصادفی از ویژگی‌ها انتخاب می‌شه و بعد بهترین تقسیم از بین این زیرمجموعه ویژگی‌ها انتخاب می‌شه. این فرایند به مدل اجازه می‌ده که برای هر گره، تنوع بیشتری داشته باشه و به این ترتیب، از بیش‌برازش جلوگیری می‌کنه و مقاومت در برابر نویز و تغییرات در داده‌ها رو افزایش می‌ده.

این دو تعریف پشت "تصادفی" در جنگل تصادفی باعث می‌شن که این الگوریتم به عنوان یک مدل قوی و مقاوم در برابر Overfitting شناخته شه. ترکیب پیش‌بینی‌های تمام درخت‌ها، که هر کدوم با توجه به نمونه‌ها و ویژگی‌های متفاوتی آموزش دیدن، منجر به ایجاد یک مدل نهایی می‌شه که هم دقت بالایی داره و هم قابلیت تعمیم خوبی به داده‌های جدید داره.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

👨‍🎓 جنگل تصادفی در رگرسیون و طبقه‌بندی

🔵 جنگل تصادفی در طبقه‌بندی (Random Forest in Classification)

🔵جنگل تصادفی مجموعه‌ای از درخت‌های تصمیمه که هر کدوم به صورت مستقل نتایج رو پیش‌بینی می‌کنن. بعد نتیجه نهایی از طریق رأی‌گیری اکثریت (Majority voting) بین نتایج درختان به دست میاد.

🔵در مرحله آموزش، نمونه‌هایی به صورت تصادفی و با جایگذاری از مجموعه داده آموزش انتخاب می‌شن و برای هر نمونه، درخت تصمیم ساخته می‌شه. ویژگی‌ها هم به صورت تصادفی انتخاب می‌شوند، که این امر منجر به کاهش وابستگی بین درختان و افزایش تنوع در مدل می‌گردد.

🔵در مرحله پیش‌بینی، هر درخت تصمیم یک پیش‌بینی انجام می‌ده و کلاسی که بیشترین رأی رو داشته باشه به عنوان پیش‌بینی نهایی انتخاب می‌شه.

🔵جنگل تصادفی در رگرسیون (Random Forest in Regression)

🔵در جنگل تصادفی برای رگرسیون، درختان تصمیم پیش‌بینی‌های عددی انجام می‌دن. پیش‌بینی نهایی از میانگین (Averaging) پیش‌بینی‌های همه درختان به دست میاد.

🔵مثل طبقه‌بندی، در رگرسیون هم نمونه‌ها و ویژگی‌ها به صورت تصادفی انتخاب می‌شن تا درختان تصمیم مستقلی ساخته شن. هر درخت بر اساس داده‌های آموزشی به صورت جداگانه آموزش داده می‌شه و بعد برای پیش‌بینی، میانگین مقادیر پیش‌بینی‌شده درختان گرفته می‌شه.

🔵در مرحله پیش‌بینی، پیش‌بینی هر درخت محاسبه می‌شه و بعد میانگین این پیش‌بینی‌ها به عنوان پیش‌بینی نهایی مدل ارائه میشه.

🔵 نکات تکمیلی

🔵تعداد درختان در جنگل تصادفی یک پارامتر مهمه. افزایش تعداد درختان می‌تونه به افزایش دقت کمک کنه، اما تا یک حد مشخص. افزایش بیشتر تأثیر ناچیزی داره و فقط زمان آموزش رو افزایش می‌ده.

🔵تنظیم عمق (Depth) درختان برای جلوگیری از overfitting مفیده. درختان عمیق‌تر جزئیات داده‌ها رو بهتر می‌گیرن اما خطر بیش‌برازش رو افزایش می‌دن.

🔵برای مسائل طبقه‌بندی، معمولاً از معیارهای تقسیم (Split Criteria) مثل Gini Impurity یا Entropy استفاده می‌شه و برای رگرسیون از Mean Squared Error یا Mean Absolute Error. انتخاب معیار مناسب روی دقت مدل تأثیر داره.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

💡جنگل تصادفی چطور با مقادیر گمشده رفتار می‌کنه؟

یکی از روش‌های رایج اینکه در هر تقسیم (split)، درخت‌های تصمیم‌گیری از مقادیر داده‌ای که موجود هستن استفاده می‌کنن و مقادیر گمشده رو نادیده می‌گیرن.

یه روش دیگه اینکه مقادیر گمشده رو در زمان تقسیم به زیر گروهی اختصاص میده که بیشترین شمار (یا وزن) رو دارن. این روش به این دلیل مفیده که اجازه می‌ده مدل‌سازی بدون نیاز به حدس زدن یا جایگزینی مقادیر گمشده پیش بره.

به طور کلی، جنگل‌های تصادفی در مقایسه با الگوریتم‌های دیگه نسبت به داده‌های گمشده مقاوم‌تر هستن، چون می‌تونن با استفاده از رای‌گیری اکثریت پیش‌بینی‌های موثری ارائه بدن.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

👨‍🎓 کاربردها، مزایا و معایب جنگل تصادفی

جنگل تصادفی با ترکیب چند درخت تصمیم‌گیری و استفاده از تکنیکی به نام بوت‌استرپینگ (Bootstrap Aggregation یا Bagging)، به نتایج قابل اطمینانی دست پیدا می‌کنه و کاربردهای زیادی داره.

🔵 کاربردها

🔵تشخیص بیماری‌: این الگوریتم برای تشخیص بیماری‌ (مثلا تشخیص بیماری‌های قلبی یا دیابت) کاربرد داره.

🔵بازاریابی: شرکت‌ها می‌تونن از جنگل تصادفی برای تحلیل رفتار مشتریان و پیش‌بینی نوع محصولات یا خدماتی که مشتریان علاقه‌مند به خریدشون هستن، استفاده کنن.

🔵کشاورزی: برای تحلیل عوامل مختلفی که روی محصولات کشاورزی تأثیر می‌گذارن، میشه از جنگل تصادفی استفاده کرد تا به بهینه‌سازی تولید محصولات کمک شه.

🔵تشخیص تقلب مالی: در صنعت بانکداری، میشه از جنگل تصادفی برای تشخیص تراکنش‌های مشکوک و جلوگیری از تقلب مالی استفاده کرد.

🔵 مزایا

🔵دقت بالا: جنگل تصادفی با ترکیب چندین درخت تصمیم، دقت بالایی در پیش‌بینی‌ها ارائه می‌ده.

🔵جلوگیری از بیش‌برازش: در مقایسه با یک درخت تصمیم‌گیری معمولی، جنگل تصادفی کمتر دچار بیش‌برازش می‌شه.

🔵قابلیت کار با داده‌های بزرگ و پیچیده: جنگل تصادفی می‌تونه با دیتاست‌های بزرگ و دارای ویژگی‌ زیاد (High Dimensionality) به خوبی کار کنه.

🔵درک اهمیت ویژگی‌ها: این الگوریتم قابلیت بررسی اهمیت ویژگی‌های مختلف در پیش‌بینی رو داره، که به فهم داده‌ها و بهبود مدل سازی کمک کننده است.

🔵 معایب

🔵پیچیدگی: جنگل تصادفی می‌تونه بسیار پیچیده شه و تفسیر و تحلیل سختی داشته باشه.

🔵زمان آموزش بالا: به دلیل ساختن چندین درخت، زمان آموزش در جنگل تصادفی ممکنه بیشتر از بقیه الگوریتم‌ها باشه.

🔵نیاز به منابع حافظه‌ای: جنگل تصادفی به دلیل نگهداری چندین درخت در حافظه، نیاز به منابع حافظه‌ای بیشتری داره.

#Machine_Learning
#Random_Forest

@Data_ML | دیتاساینس و ماشین‌ لرنینگ

🧑‍🎓 الگوریتم جنگل تصادفی یا Random Forest

جنگل تصادفی یکی از قدرتمندترین و پرکاربردترین الگوریتم‌ها در زمینه یادگیری ماشینه. توی این پست بلاگ، اینکه جنگل تصادفی یا Random Forest چیه، چطور کار می‌کنه و چرا بهتر از درخت‌ تصمیم‌ هست رو بررسی می‌کنیم. همچنین به بعضی از کاربردها، مزایا و معایبش هم پرداختیم.

🟢برای مطالعه کلیک کنین:
👉🔗 ctdrs.ir/ds0178

#Machine_Learning

@DSLanders | دی‌اس‌لندرز