Free course to build AI Agents in LangChain(Most popular framework for building AI Agents)
https://www.youtube.com/playlist?list=PLqZXAkvF1bPNQER9mLmDbntNfSpzdDIU5
#هوش_مصنوعی
🆔 @programmers_street
https://www.youtube.com/playlist?list=PLqZXAkvF1bPNQER9mLmDbntNfSpzdDIU5
#هوش_مصنوعی
🆔 @programmers_street
Turn documents, resources, or content into context for chats with LLMs
🔗 https://github.com/Mintplex-Labs/anything-llm
🆔 @programmers_street
🔗 https://github.com/Mintplex-Labs/anything-llm
🆔 @programmers_street
👍1
دوره رایگان یادگیری عمیق MIT 2025 برای مبتدیان
این دوره پروژ محو شامل مبانی شبکههای عصبی (Neural Networks)، CNNs، RNNs و LLMs است
https://introtodeeplearning.com/
#یادگیری_ماشین #یادگیری_عمیق
🆔 @programmers_street
این دوره پروژ محو شامل مبانی شبکههای عصبی (Neural Networks)، CNNs، RNNs و LLMs است
https://introtodeeplearning.com/
#یادگیری_ماشین #یادگیری_عمیق
🆔 @programmers_street
FREE Statistics Courses
https://www.mltut.com/best-free-online-courses-for-statistics/
🆔 @programmers_street
https://www.mltut.com/best-free-online-courses-for-statistics/
🆔 @programmers_street
❤2
Animations and visualizations of machinelearning concepts using Manim
🔗https://github.com/helblazer811/ManimML
#هوش_مصنوعی #یادگیری_ماشین
🆔 @programmers_street
🔗https://github.com/helblazer811/ManimML
#هوش_مصنوعی #یادگیری_ماشین
🆔 @programmers_street
Free AI Agents Crash Course. Link in comment.
🔗 https://www.youtube.com/watch?v=VkryCO8uNwc
#هوش_مصنوعی #یادگیری_ماشین
🆔 @programmers_street
🔗 https://www.youtube.com/watch?v=VkryCO8uNwc
#هوش_مصنوعی #یادگیری_ماشین
🆔 @programmers_street
❤1
10 free Python PDF ebooks :
Think Python
https://greenteapress.com/thinkpython2/thinkpython2.pdf
Python Data Science Handbook
https://github.com/terencetachiona/Python-Data-Science-Handbook/blob/master/Python%20Data%20Science%20Handbook%20-%20Jake%20VanderPlas.pdf
Elements of Data Science
https://allendowney.github.io/ElementsOfDataScience/
Open Data Structures
https://opendatastructures.org/ods-python.pdf
Cracking Codes with Python
https://inventwithpython.com/cracking/
Python beyond the Basics
https://inventwithpython.com/beyond/
The Big Book of Small Python Projects
https://inventwithpython.com/bigbookpython/
Automate the Boring Stuff with Python
https://automatetheboringstuff.com/
Python for Data Analysis
https://wesmckinney.com/book/
Think Bayes
https://allendowney.github.io/ThinkBayes2/
#پایتون #Python #علم_داده
🆔 @programmers_street
Think Python
https://greenteapress.com/thinkpython2/thinkpython2.pdf
Python Data Science Handbook
https://github.com/terencetachiona/Python-Data-Science-Handbook/blob/master/Python%20Data%20Science%20Handbook%20-%20Jake%20VanderPlas.pdf
Elements of Data Science
https://allendowney.github.io/ElementsOfDataScience/
Open Data Structures
https://opendatastructures.org/ods-python.pdf
Cracking Codes with Python
https://inventwithpython.com/cracking/
Python beyond the Basics
https://inventwithpython.com/beyond/
The Big Book of Small Python Projects
https://inventwithpython.com/bigbookpython/
Automate the Boring Stuff with Python
https://automatetheboringstuff.com/
Python for Data Analysis
https://wesmckinney.com/book/
Think Bayes
https://allendowney.github.io/ThinkBayes2/
#پایتون #Python #علم_داده
🆔 @programmers_street
👍2
This media is not supported in your browser
VIEW IN TELEGRAM
This GitHub repo is a gold mine for EVERY data scientist!
DS Interactive Python repo has interactive dashboards to learn statistics, ML models, and other DS concepts.
Topics include PCA, bagging & boosting, clustering, neural networks, etc.
Fully open-source and free!
https://github.com/GeostatsGuy/DataScienceInteractivePython
#پایتون #Python #علم_داده
🆔 @programmers_street
DS Interactive Python repo has interactive dashboards to learn statistics, ML models, and other DS concepts.
Topics include PCA, bagging & boosting, clustering, neural networks, etc.
Fully open-source and free!
https://github.com/GeostatsGuy/DataScienceInteractivePython
#پایتون #Python #علم_داده
🆔 @programmers_street
❤1
تحقیقات نشان داده شده که تسلط بر جبر خطی و معادلات دیفرانسیل و انتگرال میتواند عملکرد مدلهای یادگیری ماشین را تا ۳۰٪ بهبود بخشد
این کتاب به بررسی عمیق پایه های ریاضی یادگیری ماشین می پردازد و منبع کاملی برای آموزش ریاضیات مخصوص یادگیری ماشین است
500-pages a wonderful book for practicing mathematics for ML
"Mathematics for both Data Science and Machine Learning."
A good book for understanding and practicing, mathematics for ML
https://people.smp.uq.edu.au/DirkKroese/DSML/DSML.pdf
#یادگیری_ماشین #علم_داده
🆔 @programmers_street
این کتاب به بررسی عمیق پایه های ریاضی یادگیری ماشین می پردازد و منبع کاملی برای آموزش ریاضیات مخصوص یادگیری ماشین است
500-pages a wonderful book for practicing mathematics for ML
"Mathematics for both Data Science and Machine Learning."
A good book for understanding and practicing, mathematics for ML
https://people.smp.uq.edu.au/DirkKroese/DSML/DSML.pdf
#یادگیری_ماشین #علم_داده
🆔 @programmers_street
❤5
یکی از دوستانم که اصلاً تو خط تکنولوژی نیست، ازم میپرسید ChatGPT چطوری کار میکنه. منم سعی کردم یه توضیح ساده و سریع بدم. گفتم اینجا هم بذارمش که بعداً به کار بقیه هم بیاد!
البته جزییات فنیش خیلی بیشتر از اینه، ولی این یه خلاصه TL;DR بود که امیدوارم به دردتون بخوره :))
How LLMs works ?
فرض کن میخوایم از صفر شروع کنیم. LLM در اصل یه جور سیستم خیلی پیشرفتهست که با متن (و گاهی چیزای دیگه) کار میکنه. اول کار، هر متنی که بهش میدیم رو به یه زبون عددی تبدیل میکنه که خودش بفهمه. به این کار میگن tokenization. یعنی متن رو به تکههای کوچیک (مثل کلمه یا بخشی از کلمه) تبدیل میکنه و به هر تکه یه شماره میده که بهش میگن token. مثلاً کلمه "سلام" ممکنه یه token بشه، یا یه کلمه پیچیدهتر مثل "ناباورانه" بشکنه به "نا" و "باورانه". این کار با الگوریتمهایی مثل Byte Pair Encoding (BPE) انجام میشه و یه دایره لغات درست میکنه که مثلاً تو GPT-4 حدود 100 هزار token داره. حالا متن ما به یه رشته عدد تبدیل شده که مدل میتونه باهاش کار کنه.
بعدش میرسیم به اصل ماجرا: LLMs از یه neural network به اسم Transformer استفاده میکنن. این شبکه یه سری عدد (همون tokenها) رو میگیره و حدس میزنه که بعدش چه tokenای باید بیاد. این حدس زدن بر اساس احتمالاتیه که مدل تو مرحله pre-training یاد گرفته. تو این مرحله، مدل رو با مقدار عظیمی داده (مثلاً 15 تریلیون token از اینترنت) تمرین میدن که بتونه الگوهای زبون رو بفهمه. کارش اینه که ببینه تو این دادهها، بعد از یه جمله یا یه کلمه، معمولاً چی میاد. اینجوری میلیاردها parameter (وزنهای داخل شبکه) رو تنظیم میکنه تا پیشبینیهاش دقیقتر بشه.
وقتی مدل آموزشش تموم شد، میتونی ازش استفاده کنی. به این کار میگن inference. یه متن اولیه (مثلاً یه سوال) بهش میدی، اون شروع میکنه به پیشبینی token بعدی، یه نمونه از احتمالات انتخاب میکنه، به متن اضافه میکنه و همینجوری ادامه میده. مثل یه سیستم autocomplete خیلی باهوشه که جملهبهجمله میسازه. چون انتخاب tokenها یه مقدار تصادفیه، هر بار که اجرا میکنی ممکنه جواب یه کم فرق کنه.
تا اینجا، این یه base modelه، یعنی فقط میتونه متنایی شبیه چیزایی که تو اینترنت دیده تولید کنه. ولی برای اینکه واقعاً بهدردبخور بشه (مثلاً جواب سوال بده)، باید یه مرحله دیگه بره که بهش میگن post-training. اینجا دو تا تکنیک اصلی داره:
اولی : Supervised Fine-Tuning (SFT) به مدل یاد میدن که چجوری مثل یه دستیار جواب بده، مثلاً با تمرین روی مکالمهها یا سوالوجوابها.
دومی : Reinforcement Learning (RL)مدل رو با پاداش دادن به جوابهای درست (مثلاً تو ریاضی یا کدزنی) بهتر میکنن تا بتونه استدلال کنه و مثلاً مسائل رو قدمبهقدم حل کنه.
تا اینجا، تقریبا کل داستان LLMs خلاصه گفتیم: متن رو به token تبدیل میکنه، با Transformer پیشبینی میکنه چی باید بیاد، و با post-training به بلوغ میرسه:))
مدلهای multimodalهم بدونی بد نیست . اینا همون LLMsن، ولی یه قدم جلوتر. اینجا دیگه فقط با متن کار نمیکنن، بلکه با چیزای دیگه مثل عکس، صدا یا حتی ویدئو هم کار میکنن. چجوری؟
مثل قبل، همهچیز با tokenization شروع میشه. ولی حالا فقط متن نیست. مثلاً یه عکس رو به تکههای کوچیک (مثل پچهای تصویر) تقسیم میکنن و بهشون token میدن. یا یه فایل صوتی رو به شکل موج صوتی (مثل spectrogram) درمیآرن و به token تبدیل میکنن.
بعدش، همون Transformer که برای متن بود، این tokenهای جدید رو هم میفهمه. فرقی نمیکنه که token از متن باشه، عکس باشه یا صدا مدل فقط یه رشته token میبینه و پیشبینی میکنه که بعدش چی باید بیاد.
تو مرحله آموزش، مدل رو با دادههای مخلوط (مثلاً متن + عکس) تمرین میدن که بتونه ارتباط بین اینا رو بفهمه. مثلاً یاد میگیره که یه عکس رو توصیف کنه یا از یه صدا متن بسازه.
در کل مدلهای multimodal همون سیستم LLMن، ولی گسترش پیدا کردن که همهچیز رو به شکل token ببینن و بتونن بین نوعای مختلف داده (مثل متن و تصویر) ارتباط برقرار کنن.
اگر دوست داشتید عمیق تر راجب این موضوع مطالعه داشته باشید این ویدئو از آقای Andrej Karpathy رو پیشنهاد میکنم :
https://youtu.be/7xTGNNLPyMI?list=TLGGF2qs5wlgDR4zMDA0MjAyNQ
خیلی خوب و کامل توضیح دادن .
منبع
#LLM #AI #Machine_Learning
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
البته جزییات فنیش خیلی بیشتر از اینه، ولی این یه خلاصه TL;DR بود که امیدوارم به دردتون بخوره :))
How LLMs works ?
فرض کن میخوایم از صفر شروع کنیم. LLM در اصل یه جور سیستم خیلی پیشرفتهست که با متن (و گاهی چیزای دیگه) کار میکنه. اول کار، هر متنی که بهش میدیم رو به یه زبون عددی تبدیل میکنه که خودش بفهمه. به این کار میگن tokenization. یعنی متن رو به تکههای کوچیک (مثل کلمه یا بخشی از کلمه) تبدیل میکنه و به هر تکه یه شماره میده که بهش میگن token. مثلاً کلمه "سلام" ممکنه یه token بشه، یا یه کلمه پیچیدهتر مثل "ناباورانه" بشکنه به "نا" و "باورانه". این کار با الگوریتمهایی مثل Byte Pair Encoding (BPE) انجام میشه و یه دایره لغات درست میکنه که مثلاً تو GPT-4 حدود 100 هزار token داره. حالا متن ما به یه رشته عدد تبدیل شده که مدل میتونه باهاش کار کنه.
بعدش میرسیم به اصل ماجرا: LLMs از یه neural network به اسم Transformer استفاده میکنن. این شبکه یه سری عدد (همون tokenها) رو میگیره و حدس میزنه که بعدش چه tokenای باید بیاد. این حدس زدن بر اساس احتمالاتیه که مدل تو مرحله pre-training یاد گرفته. تو این مرحله، مدل رو با مقدار عظیمی داده (مثلاً 15 تریلیون token از اینترنت) تمرین میدن که بتونه الگوهای زبون رو بفهمه. کارش اینه که ببینه تو این دادهها، بعد از یه جمله یا یه کلمه، معمولاً چی میاد. اینجوری میلیاردها parameter (وزنهای داخل شبکه) رو تنظیم میکنه تا پیشبینیهاش دقیقتر بشه.
وقتی مدل آموزشش تموم شد، میتونی ازش استفاده کنی. به این کار میگن inference. یه متن اولیه (مثلاً یه سوال) بهش میدی، اون شروع میکنه به پیشبینی token بعدی، یه نمونه از احتمالات انتخاب میکنه، به متن اضافه میکنه و همینجوری ادامه میده. مثل یه سیستم autocomplete خیلی باهوشه که جملهبهجمله میسازه. چون انتخاب tokenها یه مقدار تصادفیه، هر بار که اجرا میکنی ممکنه جواب یه کم فرق کنه.
تا اینجا، این یه base modelه، یعنی فقط میتونه متنایی شبیه چیزایی که تو اینترنت دیده تولید کنه. ولی برای اینکه واقعاً بهدردبخور بشه (مثلاً جواب سوال بده)، باید یه مرحله دیگه بره که بهش میگن post-training. اینجا دو تا تکنیک اصلی داره:
اولی : Supervised Fine-Tuning (SFT) به مدل یاد میدن که چجوری مثل یه دستیار جواب بده، مثلاً با تمرین روی مکالمهها یا سوالوجوابها.
دومی : Reinforcement Learning (RL)مدل رو با پاداش دادن به جوابهای درست (مثلاً تو ریاضی یا کدزنی) بهتر میکنن تا بتونه استدلال کنه و مثلاً مسائل رو قدمبهقدم حل کنه.
تا اینجا، تقریبا کل داستان LLMs خلاصه گفتیم: متن رو به token تبدیل میکنه، با Transformer پیشبینی میکنه چی باید بیاد، و با post-training به بلوغ میرسه:))
مدلهای multimodalهم بدونی بد نیست . اینا همون LLMsن، ولی یه قدم جلوتر. اینجا دیگه فقط با متن کار نمیکنن، بلکه با چیزای دیگه مثل عکس، صدا یا حتی ویدئو هم کار میکنن. چجوری؟
مثل قبل، همهچیز با tokenization شروع میشه. ولی حالا فقط متن نیست. مثلاً یه عکس رو به تکههای کوچیک (مثل پچهای تصویر) تقسیم میکنن و بهشون token میدن. یا یه فایل صوتی رو به شکل موج صوتی (مثل spectrogram) درمیآرن و به token تبدیل میکنن.
بعدش، همون Transformer که برای متن بود، این tokenهای جدید رو هم میفهمه. فرقی نمیکنه که token از متن باشه، عکس باشه یا صدا مدل فقط یه رشته token میبینه و پیشبینی میکنه که بعدش چی باید بیاد.
تو مرحله آموزش، مدل رو با دادههای مخلوط (مثلاً متن + عکس) تمرین میدن که بتونه ارتباط بین اینا رو بفهمه. مثلاً یاد میگیره که یه عکس رو توصیف کنه یا از یه صدا متن بسازه.
در کل مدلهای multimodal همون سیستم LLMن، ولی گسترش پیدا کردن که همهچیز رو به شکل token ببینن و بتونن بین نوعای مختلف داده (مثل متن و تصویر) ارتباط برقرار کنن.
اگر دوست داشتید عمیق تر راجب این موضوع مطالعه داشته باشید این ویدئو از آقای Andrej Karpathy رو پیشنهاد میکنم :
https://youtu.be/7xTGNNLPyMI?list=TLGGF2qs5wlgDR4zMDA0MjAyNQ
خیلی خوب و کامل توضیح دادن .
منبع
#LLM #AI #Machine_Learning
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
YouTube
Deep Dive into LLMs like ChatGPT
This is a general audience deep dive into the Large Language Model (LLM) AI technology that powers ChatGPT and related products. It is covers the full training stack of how the models are developed, along with mental models of how to think about their "psychology"…
❤5👍2
This media is not supported in your browser
VIEW IN TELEGRAM
👉This AI extension can automatically control your actual browser.
📍OpenDia lets Claude, ChatGPT and local LLMs click buttons, fill forms, and navigate websites using your existing logged-in accounts.
📌هوش مصنوعی OpenDia یک افزونه مرورگر متن باز است که به مدلهای هوش مصنوعی مانند Claude و ChatGPT اجازه میدهد تا مرورگرهای وب را کنترل کنند، وظایفی مانند کلیک کردن روی دکمهها، پر کردن فرمها و جستجو در وبسایتها را با استفاده از حسابهای کاربری موجود انجام دهند، که قابلیتهای اتوماسیون را بدون نیاز به تغییر مرورگر ارائه میدهد.
🔗https://github.com/aaronjmars/opendia
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
📍OpenDia lets Claude, ChatGPT and local LLMs click buttons, fill forms, and navigate websites using your existing logged-in accounts.
📌هوش مصنوعی OpenDia یک افزونه مرورگر متن باز است که به مدلهای هوش مصنوعی مانند Claude و ChatGPT اجازه میدهد تا مرورگرهای وب را کنترل کنند، وظایفی مانند کلیک کردن روی دکمهها، پر کردن فرمها و جستجو در وبسایتها را با استفاده از حسابهای کاربری موجود انجام دهند، که قابلیتهای اتوماسیون را بدون نیاز به تغییر مرورگر ارائه میدهد.
🔗https://github.com/aaronjmars/opendia
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
❤1
⬅️ شروع دوره جدید Large Language Models دانشگاه استنفورد
در این دوره روش ساخت مدلهای زبانی( مشابه ChatGPT ) از جمع آوری و تحلیل داده تا تکنیکهایی برای پاسخدهی بهتر مدل آموزش داده شده
https://www.youtube.com/watch?v=9vM4p9NN0Ts
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
در این دوره روش ساخت مدلهای زبانی( مشابه ChatGPT ) از جمع آوری و تحلیل داده تا تکنیکهایی برای پاسخدهی بهتر مدل آموزش داده شده
https://www.youtube.com/watch?v=9vM4p9NN0Ts
#یادگیری_ماشین #هوش_مصنوعی
🆔 @programmers_street
❤1
⚜ منابع یادگیری عمیق ( Deep Learning )
☑️ دوره دانشگاههای داخل
➖ دکتر سلیمانی - شریف
➖ دکتر محمدی ( مبانی ) - علم و صنعت
➖ دکتر محمدی ( برای بینایی ) - علم و صنعت
➖ دکتر غیاثی - فردوسی
➖ دکتر رضوی - تبریز
➖ دکتر کلهر - تهران
➖ دکتر آقامحمدی - شریف
➖ اخوان پور - شهید رجایی
➖ دکتر کیوان راد - مالک اشتر
☑️ دوره دانشگاههای خارج از کشور
➖ List of all Courses
کانال مهندسی کامپیوتر
👇
🆔 @programmers_street
کانال اختصاصی پایتون👇
🆔 @Python4all_pro
☑️ دوره دانشگاههای داخل
➖ دکتر سلیمانی - شریف
➖ دکتر محمدی ( مبانی ) - علم و صنعت
➖ دکتر محمدی ( برای بینایی ) - علم و صنعت
➖ دکتر غیاثی - فردوسی
➖ دکتر رضوی - تبریز
➖ دکتر کلهر - تهران
➖ دکتر آقامحمدی - شریف
➖ اخوان پور - شهید رجایی
➖ دکتر کیوان راد - مالک اشتر
☑️ دوره دانشگاههای خارج از کشور
➖ List of all Courses
کانال مهندسی کامپیوتر
👇
🆔 @programmers_street
کانال اختصاصی پایتون👇
🆔 @Python4all_pro
❤2
📘The-book-of-secret-knowledge : A curated knowledge bank every developer wishes they had sooner
A collection of inspiring lists, manuals, cheatsheets, blogs, hacks, one-liners, cli/web tools and more.
🔻 این ریپو مجموعهای منحصربهفرد و متنباز از ابزارها، چیتشیتها و هکها برای توسعهدهندگان ارائه میدهد
✔️https://github.com/trimstray/the-book-of-secret-knowledge
🆔 @programmers_street
A collection of inspiring lists, manuals, cheatsheets, blogs, hacks, one-liners, cli/web tools and more.
🔻 این ریپو مجموعهای منحصربهفرد و متنباز از ابزارها، چیتشیتها و هکها برای توسعهدهندگان ارائه میدهد
✔️https://github.com/trimstray/the-book-of-secret-knowledge
🆔 @programmers_street
💠 سلام به همه علاقهمندان به علم داده، مخصوصاً اونهایی که تازه وارد این مسیر شدن
من سعی کردم چالشها و دغدغههایی که افراد در ابتدای مسیر باهاش روبهرو هستن رو جمعآوری کنم و دربارهشون با متخصصهای این حوزه گفتوگوهای کوتاه و مفیدی داشته باشم.
👈اگه شما هم در ابتدای مسیر یادگیری علم داده هستید، پیشنهاد میکنم این ویدئو و سایر محتوای کانال رو از دست ندید
https://youtu.be/T4TEKd-YFT0?si=t0UfrUwGv31FY6Ca
#علم_داده
🆔 @programmers_street
من سعی کردم چالشها و دغدغههایی که افراد در ابتدای مسیر باهاش روبهرو هستن رو جمعآوری کنم و دربارهشون با متخصصهای این حوزه گفتوگوهای کوتاه و مفیدی داشته باشم.
👈اگه شما هم در ابتدای مسیر یادگیری علم داده هستید، پیشنهاد میکنم این ویدئو و سایر محتوای کانال رو از دست ندید
https://youtu.be/T4TEKd-YFT0?si=t0UfrUwGv31FY6Ca
#علم_داده
🆔 @programmers_street
❤1