مهندسی داده
792 subscribers
112 photos
7 videos
24 files
314 links
BigData.ir کانال رسمی وب سایت
مطالبی راجع به مهندسی داده و طراحی زیرساخت‌های پردازش دیتا و ابزارهای مدرن دیتا
ارتباط با ادمین: @smbanaei
گروه تخصصی مهندسی داده 👇
https://t.iss.one/bigdata_ir_discussions2
کانال یوتیوب 👇
https://www.youtube.com/@irbigdata
Download Telegram
فیلم گردی با فیلیمو- بخش دوم: متن کاوی و دسته بندی فیلم ها - https://is.gd/arWPIf
مقالات میهمان
, #پوریا_گنجی, #فیلیمو, #ماشین_لرنینگ, #یادگیری_ماشین
در بخش اول به کمک مدلسازی گراف رابطه بین بازیگران فیلمها رو بررسی کردیم. در این بخش در دو قسمت مجزا ابتدا با داشبوردی برای جستجو در داده ها آشنا میشیم. سپس بر اساس مدل ساده ای به دسته بندی فیلم ها میپردازیم قسمت اول برای دسترسی به داشبورد کلیک کنید داشبوردی که برای جستجو …
فیلم گردی با فیلیمو - بخش اول: تحلیل گراف بازیگران - https://is.gd/5SQdr6
مقالات میهمان
, #Gephi, #پوریا_گنجی, #تحلیل_شبکه_های_اجتماعی, #گراف, #ماشین_لرنینگ, #یادگیری_ماشین
در این مقاله، پوریا گنجی با رویکردی کاربردی به تحلیل داده‌های فیلم‌های ایرانی و بررسی گراف بازیگران با استفاده از نرم افزار Gephi پرداخته است.
Forwarded from M H Shahriari 🇮🇷
با سلام و احترام

پرسشنامه‌ای با هدف بررسی میزان آگاهی دانشجویان گرامی حوزه‌ی علوم پزشکی و همچنین علوم مهندسی، ریاضی، آمار، انفورماتیک پزشکی و سایر رشته‌های مرتبط در زمینه‌ی کلان‌داده (BigData) تنظیم شده است. درصورت امکان، با تکمیل دقیق این پرسشنامه ما را همراهی کنید.

زمان لازم: 5 دقیقه

پیشاپیش از همکاری شما صمیمانه سپاسگزاریم.


👈👈👈 شرکت در نظرسنجی
👈👈👈 شرکت در نظرسنجی


@ELham_Nazari_MI
کلان‌داده به زبان ساده : نصب و راه‌اندازی هدوپ – بخش دوم - https://is.gd/BfOhxa
کلان‌داده به زبان ساده
, #نصب_هدوپ, #هدوپ
در ادامه سری آموزشی کلان‌داده به زبان ساده،‌ در این آموزش به نحوه نصب و پیکربندی هدوپ بر روی اوبونتو سرور ۲۰۱۸ خواهیم پرداخت و سرویس‌های پایه هدوپ را اجرا کرده، برای مراحل بعدی آموزش، آماده می‌شویم.
Forwarded from Mohammad Reza
💰 مشاغل: #مهندسـداده
🕰 مدل همکاری: #هم_بنیانگذار
📍⁣⁣ استان: #تهران


◀️ نام #استارتاپ: #سوشیالو

💭 درباره استارتاپ:
سوشیالو پلتفرم #تحلیل و مدیریت #شبکه_های_اجتماعی است و به جمع آوری و بررسی اطلاعات شبکه های اجتماعی در جهت اهداف دیجیتال مارکتینگ مشغول است
socialo.net

⚖️ شرایط:
- آشنایی با #python
- آشنایی #mongodb
- آشنایی elasticsearch#
- داشتن روحیه کارگروهی


💵 مزایا:
- #قابلیت_فعالیت_بصورت_هم_بنیانگذار
- شرایط #قابل_مذاکره
- حضور در محیط پویا و فعال کارآفرینی
- امکان فعالیت به صورت پاره وقت و دورکاری



☎️ اطلاعات تماس:
@mr_asg
09364232989
[email protected]
یادگیری عمیق بدون درد و خونریزی با لودویگ - https://is.gd/DVrYHc
ابزار و کتابخانه ها
, #اوبر, #پردازش_تصویر, #پردازش_زبان_طبیعی, #پردازش_متن, #لودویگ, #یادگیری_عمیق
در این نوشتار به بررسی کتابخانه جدید لودویگ که محصول تیم هوش مصنوعی شرکت اوبر است می‌پردازیم و می‌بینیم که چگونه می‌توان بدون یک خط کدنویسی، مدل‌های پیش‌گویی کننده حرفه‌ای به کمک یادگیری عمیق ساخت و از آنها در کاربردهای واقعی استفاده کرد.
دست به کد: تحلیل احساسی نظرات کاربران درباره یک فیلم - https://www.bigdata.ir/1396/04/%d8%aa%d8%ad%d9%84%db%8c%d9%84-%d8%a7%d8%ad%d8%b3%d8%a7%d8%b3%d8%a7%d8%aa-%d9%85%d8%af%d9%84%d8%b3%d8%a7%d8%b2%db%8c-%d8%b5%d9%86%d8%af%d9%88%d9%82%da%86%d9%87-%da%a9%d9%84%d9%85%d8%a7%d8%aa/
پردازش زبان طبیعی, دست به کد
, #NLP, #ScikitLearn, #Sentiment_Analysis, #Word2Vec, #بردار_ویژگی, #پردازش_متن, #تحلیل_احساس, #جنگل_تصادفی, #دست_به_کد, #دسته_بندی, #سنجش_احساسات, #عددی_سازی, #کگل, #مثال_کاربردی, #یادگیری_ماشین
در بخش اول از مجموعه مقالات آموزشی پردازش متن، با مفاهیم پایه متن کاوی و همچنین کتابخانه فارسی هضم برای کار با متون فارسی آشنا شدید. در ادامه این سری آموزشی با بررسی یکی از مسابقات پردازش متن سایت معروف کگل، به صورت عملی با جنبه های نوین این شاخه از علم داده و تحلیل …
آشنایی با استاندارد داده های مرتب (Tidy Data) - https://is.gd/Fot3Q7
پاکسازی و آماده سازی
, #استانداردهای_داده, #پاکسازی_داده, #پیش_پردازش_داده, #پیش_پردازش_داده_ها
اولین مرحله از کار با داده‌ها، پیش‌پردازش و آماده‌سازی داده‌هاست. این مرحله که زمان اصلی پردازش داده‌ها را به خود اختصاص می‌دهد تاثیر مهم و مستقیمی در کیفیت نتایج حاصل از تحلیل داده‌ها خواهد داشت. در این مقاله که به قلم محمد چناریان نخعی نگاشته شده است با استاندارد داده‌های مرتب یا Tidy Data آشنا می‌شویم
علم‌داده : جذاب‌ترین حوزه کاری در سال ۲۰۱۹ به انتخاب careercast - https://is.gd/5AIVbT
اخبار
, #آمار_و_احتمال, #علم_داده
سایت معتبر کاریابی careercast به عادت هر ساله، گزارش امتیازدهی مشاغل خود را منتشر کرده است که برای اولین بار، علم داده در این سایت بالاترین امتیاز را به خود اختصاص داده است و جذاب‌ترین شغل سال جاری معرفی شده است.
آشنایی با استاندارد داده‌های باز - https://is.gd/T83TAZ
ابزار و کتابخانه ها, استانداردها
, #استاندارد, #استانداردهای_داده, #داده_های_باز
حرکت به سمت یک جامعه پیشرو و توسعه‌یافته به ابزارهای مختلفی نیاز دارد که یکی از مهم‌ترین آنها، شفافیت داده‌ها و آمار در حوزه‌های مختلف کشور است که به کمک آن، دانشمندان و برنامه‌ریزان بتوانند با پایش و تحلیل درست این داده‌ها، راهکارهایی مناسب در حذف گلوگاه‌ها و شناسایی نقاط ضعف و قوت جامعه، ارائه دهند. در این راستا، استاندارد داده‌های باز در جهت گسترش فرهنگ به اشتراک گذاری داده‌ها توسط سازمانها و شرکتها، چندین سال است که در دنیای داده، رایج شده است. در این مقاله که توسط دکتر فرزاد مینویی در سایت وزین آنالیکا منتشر شده است، به بررسی این استاندارد می‌پردازیم.
دست به کد: جمع‌آوری خودکار توئیت‌های فارسی با استفاده از GitLab CI - https://is.gd/S7zPld
پردازش زبان طبیعی, دست به کد
, #پردازش_متون_فارسی, #توئیت, #توئیتر, #دست_به_کد, #گیت_لب, #گیت_هاب
در ادامه مباحث جمع آوری و پردازش توئیت‌های فارسی، به عنوان یک منبع عالی برای پردازش متن، در این مقاله قصد داریم به ایجاد یک خط تولید ساده جمع‌آوری توئیت بپردازیم که روزانه و بدون پرداخت هیچ هزینه‌ای، به جمع آوری توئیت‌های فارسی بپردازد. این خط تولید را با امکانات گیت‌لب راه‌اندازی می‌کنیم و توئیت‌های جمع‌آوری شده را روزانه در یک مخزن عمومی در گیت‌هاب به اشتراک می‌گذاریم.
آیا هدوپ در حال انقراض است؟ - https://is.gd/O3eGKB
اخبار
,
در این مقاله، به بررسی این موضوع میپردازیم که چرا امروزه به نظر می رسد هدوپ دیگر کارآیی گذشته را ندارد و باهم دلایل رواج این باور را بررسی کرده و سعی می کنیم حقیقت ماجرا و اینکه امروزه دنیای کلان‌داده به کدامین سمت در حال حرکت است را بفهمیم.