Visualize transformer attention!

AttentionViz, created by Catherine Yeh and expanded by Yida Chen, helps you explore transformer self-attention by visualizing query and key vectors in a joint embedding.

Paper: arxiv.org/abs/2305.03210
Website: attentionviz.com

#مقاله #ایده_جذاب

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

کتاب سم التمن مدیر openAI

https://playbook.samaltman.com/

#کتاب #پادکست

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

با pdf خودتون چت کنید

https://chatwithpdf.sdan.io/

#خبر #هوش_مصنوعی

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

تا حالا براتون اگر سوال بوده که یادگیری عمیق را از کجا و چه منبع پایه یادبگیرید کدوم است این منبع رو پیشنهاد میدم/

▪️ Carnegie Mellon University Deep Learning

#یادگیری_عمیق #منابع_پیشنهادی #مبتدی

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

اگر هم یادگیری عمیق را مقداری پیشرفته تر برای یادگیری میخواهید مورد مطالعه قرار دهید این کلاس آموزشی را پیشنهاد میدم.

▪️ MIT 6.S191: Introduction to Deep Learning

#یادگیری_عمیق #منابع_پیشنهادی #پیشرفته

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

Scaling LLM Interpretability

-Gradient descent method grounded in theory of causal abstraction uncovered perfect alignment between interpretable symbolic algos & small deep learning models
-Scaling this alignment search to LLMs helps understand Alpaca-7B

https://arxiv.org/abs/2305.08809

«کارشناس آمار و تحلیل داده»
نام شرکت: بورس اوراق بهادار تهران
شهرستان: تهران_ سعادت آباد

مدرک تحصیلی: فارغ التحصیل فوق لیسانس و یا دکتری در رشته‌های مدیریت مالی، حسابداری، اقتصاد و آمار

سابقهٔ کار: حداقل یک سال کار در بازار سرمایه و آشنایی کامل با بازار سرمایه

مدرک تحصیلی: فارغ‌التحصیل فوق لیسانس و یا دکتری در رشته‌های مدیریت مالی، حسابداری و اقتصاد

شرایط تخصصی:مسلط به اکسل پیشرفته، مسلط به حداقل یکی از نرم‌افزارهای اقتصاد سنجی شامل EViews, Stata, R و یا Matlab(داوطلبین مسلط به پایتون در اولویت هستند)، توانایی ترجمۀ متون تخصصی مالی

سایر شرایط: برخورداری از روحیۀ کار تیمی، همکاری و تعامل، تعهد و مسئولیت‌پذیری؛ دقت نظر بالا در انجام امور محوله؛ دارا بودن گواهی پایان خدمت یا معافیت دائم برای آقایان

لطفا رزومه های خود را با موضوع «کارشناس آمار و تحلیل داده» به آدرس زیر ارسال نمایید: 👇🏻👇🏻
[email protected]

ورژن دوم کلاس آموزشی دانشگاه استنفورد

Transformers United V2
Winter 2023

https://web.stanford.edu/class/cs25

#پردازش_زبان_طبیعی #منابع #پیشرفته

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

مقاله خوبی که اخیرا منتشر شده اومدن شیواه کارایی LLM ها بررسی کردند که عمدتاً چه مسائلی را حل می کنند در مدلهای LLM ها مسیرهای استدلالی متعددی را در نظر میگیرند که بهترین پاسخ برای کامنت یوزر باشد که تصمیم گیری در مورد اقدامات بعدی، انتخاب ها را خود ارزیابی میکند. در این این مدل بررسی کردند که چگونه میتواند خودش را بهبود دهد.
و کلی ایده جذابی که میتوانید بدست اورید.
▪️ Tree of Thoughts: LLMs Deliberately Solving Problems

#مقاله #ایده_جذاب

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

پیرو ادامه این مقاله

▪️ Finetuning LLMs Efficiently with Adapters

#مقاله #ایده_جذاب

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

منابعی برای علاقمندان به تایم سریها و هوش مصنوعی در موضوعات مالی

▪️ Deep Time-Series Learning and Finance Applications fall 2017, by Francois Belletti

#هوش_مصنوعی #منابع #فیلم #کلاس_آموزشی

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

پادکست دکتر وحید بهزادان در رابطه با AI Safety in AGI بسیار شنیدنی است.
https://dataskeptic.com/blog/episodes/2023/a-psychopathological-approach-to-safety-in-agi

#پادکست

موقعیت کارآموزی در حوزه NLP

برنامه تحقیقات تابستانی دانشگاه کوچ به دانشجویان و علاقه‌مندان این فرصت را می‌دهد تا در کنار کسب تجربه تحقیقاتی خود را برای تحصیلات تکمیلی یا کار در حرفه مدنظر آماده کنند. با توجه به این برنامه گروه NLP دانشکده مهندسی کامپیوتر به سرپرستی Dr.Gözde Gül Sahin تصمیم دارد از علاقه‌مندان در زمینه پردازش زبان طبیعی دعوت به عمل آورد. دو پروژه در این زمینه وجود دارد که در صورت دعوت به مصاحبه برای داوطلبین تشریح می‌شوند.
از علاقه‌مندان درخواست می‌شود تا رزومه خود را به همراه چند نمونه کد پروژه‌های مرتبط را به آدرس ایمیل [email protected] بفرستند. (لطفا عنوان ایمیل را KUSRP Internship را قرار دهید.)

شرایط:
۱- علاقه‌مند به پژوهش در حوزه NLP و مخصوصا Large Language Models
۲- تعهد کامل در طول دوره کارآموزی و عدم اشتغال به کار یا پروژه دیگر
۲- مسلط به پایتون و تجربه کار با کتابخانه‌های مرتبط با Deep Learning مثل PyTorch

نوع همکاری: حضوری (اولویت) / دورکاری

نکات:
ادامه همکاری پس از پایان دوره رسمی کارآموزی در صورت توافق طرفین مطلوب است.
ارایه خوابگاه از طرف دانشگاه گارانتی نمی‌شود!

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

یه مدل جدید ریلیز کردن از مدل متا بهتره:
https://huggingface.co/tiiuae/falcon-7b

ولی یه نکات خیلی مسخره ای داره، مثلا برای اینکه بتونید تجاری ازش استفاده کنید باید ازشون اجازه بگیرید و ۱۰٪ درآمد رو تو شرایط خاصی بهشون بدید 😂
اینم لایسنس:
https://huggingface.co/tiiuae/falcon-7b/blob/main/LICENSE.txt

یعنی کاری که این مدلهای زبانی بزرگ با دنیای هوش مصنوعی کرد سونامی با مردم نکرد!

Some recent news: 5 projects to appear at #RSS2023 and 1 at #ICML2023! 🥳🤖

1) RT-1: https://robotics-transformer.github.io

2) DIAL: https://instructionaugmentation.github.io

3) ROSIE: https://diffusion-rosie.github.io

4) RLS: https://rl-at-scale.github.io

5) JSRL: https://jumpstart-rl.github.io

6) LLM + Robotics Demos, TBA!

🔸 InstructBLIP: Towards General-purpose Vision-Language Models with Instruction Tuning

https://github.com/salesforce/LAVIS/tree/main/projects/instructblip

✳️ دوره جامع و رایگان ده جلسه‌ای کاربرد کامپیوتر (SPSS) در علوم اجتماعی

▫️ این دوره شش ساعت و پروژه‌محور (انجام عملی توسط کاربر) است.
▫️ مدرس: حمید مسعودی

● جلسه اول: مقدمه، منابع، چیستی آمار، توصیف و استنباط، پیش‌فرض‌های آماری، فرضیات و ...

● جلسه دوم: دانلود، نصب، راه‌اندازی و معرفی منوهای اصلی نرم‌افزار SPSS

● جلسه سوم: کدگذاری، انواع داده، ویرایش، نام‌گذاری و جابجایی داده‌ها در SPSS

● جلسه چهارم: دسته‌بندی یا کدگذاری مجدد و شناسایی داده‌های پرت

● جلسه پنجم: تعریف، شرایط، مثال و انجام شاخص‌سازی یا مقیاس‌سازی

● جلسه ششم: انجام آمار توصیفی تک و چند متغیره و رسم بهینه نمودارها و جدول‌ها

● جلسه هفتم: دستورهای جداسازی (Split)، انتخاب (Select)، وزن‌دهی (Weight) به داده‌ها

● جلسه هشتم: آزمون‌های آماری فرضیات رابطه‌ای (کمی و کیفی)

● جلسه نهم: آزمون‌های آماری فرضیات مقایسۀ میانگین و نسبت (کمی و کیفی)

● جلسه دهم: آزمون‌های آماری علّی یا رگرسیون و تحلیل مسیر

بهتر است از جلسه اول، دوره را ببینید؛ در عین حال برای دانلود و تماشای هر جلسه بر روی آن کلیک کنید یا اگر لینک‌ها کار نکرد از طریق کانال آپارات زیر اقدام کنید:

aparat.com/hmdmasoudi


امکان دریافت در فرمت‌های مختلف در آپارات فراهم است.

اگر برای کسی مفید می‌دانید به اشتراک بگذارید. 🙏

سالم باشید. ❤️

@hmdsociology

دکتر انگ چندتا دوره رایگان به مدت محدود گذاشته اگه علاقمندین دنبال کنید
https://www.deeplearning.ai/short-courses/

❓ چرا سرویس گذر از تحریم F14

📌 دارای تیم فنی قوی و متخصص و نوآور
📌 ارائه بیش از 60 سرور از 15 کشور برای هر اشتراک (در حال افزایش🔼)
📌 ارائه سرویس موقت جایگزین در مواقع بحران برای حفظ ارتباط کاربران
📌 دارای پشتیبانی با دانش بالا و صبر و حوصله
📌 ارائه آموزش‌های لازم بصورت تصویری برای کاربران
📌 ارائه سرویس برای تمامی سیستم عامل‌ها با یک اشتراک
📌 ارائه سرویس برای تمامی ISPها
📌 ارائه کانکشن‌های سازگار با هر ISP
📌 ارائه سرورهای VIP برای اینترنت‌های دارای محدودیت بسیار بالا
📌 نمایش ریز مصرف کاربران
📌 امکان سفارش و تمدید بصورت کاملا خودکار در ۲۴ ساعت شبانه روز
📌 امکان سفارش و تمدید با رمز ارزها

☄️ این‌ها بخشی از ویژگی‌های سرویس ما می‌باشد.

✔️ از نــظـر مـا فــروش پـایـان کــار نـیـسـت بـلـکه آغــاز یــک تـعـهد مـی‌بـاشـد.

🔸 https://t.iss.one/F14PanelBot

پ.ن: پیشنهاد ویژه من به شما کیفیت پاسخگویی و پشتیبانی عالی برای کانکشنها

ده #ایده_جذاب که در یک ماه گذشته منتشر شد. قسمت ۱ از ۳

1) LLM explains neurons in LLMs - applies GPT-4 to automatically write explanations on the behavior of neurons in LLMs and even score those explanations; this offers a promising way to improve interpretability in future LLMs and potentially detect alignment and safety problems.

2) PaLM 2 - a new state-of-the-art language model integrated into AI features and tools like Bard and the PaLM API; displays competitive performance in mathematical reasoning compared to GPT-4; instruction-tuned model, Flan-PaLM 2, shows good performance on benchmarks like MMLU and BIG-bench Hard.

3) ImageBind - an approach that learns joint embedding data across six modalities at once; extends zero-shot capabilities to new modalities and enables emergent applications including cross-modal retrieval, composing modalities with arithmetic, cross-modal detection, and generation.

4) TidyBot - shows that robots can combine language-based planning and perception with the few-shot summarization capabilities of LLMs to infer generalized user preferences that are applicable to future interactions.

5. Unfaithful Explanations in Chain-of-Thought Prompting - demonstrates that CoT explanations can misrepresent the true reason for a model’s prediction; when models are biased towards incorrect answers, CoT generation explanations supporting those answers.

6) InstructBLIP - explores visual-language instruction tuning based on the pre-trained BLIP-2 models; achieves state-of-the-art zero-shot performance on 13 held-out datasets, outperforming BLIP-2 and Flamingo.

7) Active Retrieval Augmented LLMs - introduces FLARE, retrieval augmented generation to improve the reliability of LLMs; FLARE actively decides when and what to retrieve across the course of the generation; demonstrates superior or competitive performance on long-form knowledge-intensive generation tasks.

8) FrugalGPT - presents strategies to reduce the inference cost associated with using LLMs while improving performance.

9) StarCoder - an open-access 15.5B parameter LLM with 8K context length and is trained on large amounts of code spanning 80+ programming languages.

10) MultiModal-GPT - a vision and language model for multi-round dialogue with humans; the model is fine-tuned from OpenFlamingo, with LoRA added in the cross-attention and self-attention parts of the language model.

#مقاله

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind

۸۰۰ کلاس درس دانشگاهی، عموما از دانشگاه های Ivy League آمریکا و معتبر در زمینه Computer Science. فرصت خوبی برای یادگیری و یا آشنایی با نحوه تدریس و کلاس های دانشگاهی.

bit.ly/3472Iia‎

#منابع #منابع_پیشنهادی #فیلم #کلاس_آموزشی

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind