مهندسی داده
793 subscribers
112 photos
7 videos
24 files
315 links
BigData.ir کانال رسمی وب سایت
مطالبی راجع به مهندسی داده و طراحی زیرساخت‌های پردازش دیتا و ابزارهای مدرن دیتا
ارتباط با ادمین: @smbanaei
گروه تخصصی مهندسی داده 👇
https://t.iss.one/bigdata_ir_discussions2
کانال یوتیوب 👇
https://www.youtube.com/@irbigdata
Download Telegram
دست به کد: جمع آوری و تحلیل اولیه آگهی‌های استخدام جابینجا - https://bit.ly/2OpbmMW
دست به کد
, #اسکرپی, #دست_به_کد
در این نوشتار، به استخراج داده‌های سایت کاریابی جابینجا به کمک کتابخانه اسکرپی و تحلیل داده‌های شرکتها با نرم افزار پاور بی آی پرداخته‌ایم.
آماده سازی داده‌ها برای پردازش، بیشترین زمان تحلیل بصری آنها را به خود اختصاص داده است.
علم داده، جامعه و اخلاق - https://is.gd/Vpb1Xb
اخلاق و جامعه
,
به عنوان دیتاساینتیست، چقدر به کارکرد درست الگوریتم و مدل تان فکر می کنید؟ مدلی که توسعه می دهید، چقدر از پیش داوری های ذهنی تان تاثیر می گیرد؟ آیا جایی برای دریافت بازخورد و اصلاح عملکرد مدلتان در نظر می گیرید؟ اگر مدل خطا داشته باشد، چه تبعاتی ممکن است برای کاربران آن ایجاد شود؟
دریمیو : راهکار یکپارچه سازی داده‌های سازمانی -https://bit.ly/2I0ZW1h
ابزار و کتابخانه ها, ابزار و کتابخانه ها, هدوپ و فناوریهای مرتبط
, #دریمیو, #هدوپ #راهکارهایـسازمانی #ابزارهایـهوشـتجاری
وجود منابع مختلف داده‌ در یک سازمان امروزه به امری رایج تبدیل شده است و وجود ابزاری که بتواند به تمام منابع داده‌ای موجود دنیا متصل شده، یک واسط استاندارد در اختیار تحلیل‌گران داده بگذارد، غنیمت بزرگی است که دریمیو، این رسالت را برعهده گرفته است.
کلان‌داده به زبان ساده : نصب و راه‌اندازی هدوپ - بخش اول - https://is.gd/R6KJGG
کلان‌داده به زبان ساده
, #اسپارک, #اوبونتو, #نصب_و_راه_اندازی, #هدوپ

با توجه به رهیافت سایت مهندسی داده در نشر و تولید مطالب تخصصی در حوزه کلان‌داده، تصمیم گرفتیم بخش جدیدی را با عنوان “کلان‌داده به زبان ساده” راه‌اندازی کنیم که مشابه با سری آموزشی “دست به کد”، با نگاهی کاربردی و عملی، راهنمای علاقه‌مندان به کار در این حوزه باشد.



مقدمه...
نگاهی به داده های مسکن در شهر تهران - https://is.gd/BXiAfN
مقالات میهمان
, #پوریا_گنجی, #ماشین_لرنینگ, #مثال_کاربردی, #مسکن, #هوش_تجاری, #یادگیری_ماشین
همراه با پوریا گنجی عزیز به تحلیل داده‌های مسکن شهر تهران بر اساس داده‌های آنلاین سایت کیلید می‌پردازیم. پاور بی آی و پایتون دو ابزار اصلی به کار رفته در این نوشتار هستند.
فیلم گردی با فیلیمو- بخش دوم: متن کاوی و دسته بندی فیلم ها - https://is.gd/arWPIf
مقالات میهمان
, #پوریا_گنجی, #فیلیمو, #ماشین_لرنینگ, #یادگیری_ماشین
در بخش اول به کمک مدلسازی گراف رابطه بین بازیگران فیلمها رو بررسی کردیم. در این بخش در دو قسمت مجزا ابتدا با داشبوردی برای جستجو در داده ها آشنا میشیم. سپس بر اساس مدل ساده ای به دسته بندی فیلم ها میپردازیم قسمت اول برای دسترسی به داشبورد کلیک کنید داشبوردی که برای جستجو …
فیلم گردی با فیلیمو - بخش اول: تحلیل گراف بازیگران - https://is.gd/5SQdr6
مقالات میهمان
, #Gephi, #پوریا_گنجی, #تحلیل_شبکه_های_اجتماعی, #گراف, #ماشین_لرنینگ, #یادگیری_ماشین
در این مقاله، پوریا گنجی با رویکردی کاربردی به تحلیل داده‌های فیلم‌های ایرانی و بررسی گراف بازیگران با استفاده از نرم افزار Gephi پرداخته است.
Forwarded from M H Shahriari 🇮🇷
با سلام و احترام

پرسشنامه‌ای با هدف بررسی میزان آگاهی دانشجویان گرامی حوزه‌ی علوم پزشکی و همچنین علوم مهندسی، ریاضی، آمار، انفورماتیک پزشکی و سایر رشته‌های مرتبط در زمینه‌ی کلان‌داده (BigData) تنظیم شده است. درصورت امکان، با تکمیل دقیق این پرسشنامه ما را همراهی کنید.

زمان لازم: 5 دقیقه

پیشاپیش از همکاری شما صمیمانه سپاسگزاریم.


👈👈👈 شرکت در نظرسنجی
👈👈👈 شرکت در نظرسنجی


@ELham_Nazari_MI
کلان‌داده به زبان ساده : نصب و راه‌اندازی هدوپ – بخش دوم - https://is.gd/BfOhxa
کلان‌داده به زبان ساده
, #نصب_هدوپ, #هدوپ
در ادامه سری آموزشی کلان‌داده به زبان ساده،‌ در این آموزش به نحوه نصب و پیکربندی هدوپ بر روی اوبونتو سرور ۲۰۱۸ خواهیم پرداخت و سرویس‌های پایه هدوپ را اجرا کرده، برای مراحل بعدی آموزش، آماده می‌شویم.
Forwarded from Mohammad Reza
💰 مشاغل: #مهندسـداده
🕰 مدل همکاری: #هم_بنیانگذار
📍⁣⁣ استان: #تهران


◀️ نام #استارتاپ: #سوشیالو

💭 درباره استارتاپ:
سوشیالو پلتفرم #تحلیل و مدیریت #شبکه_های_اجتماعی است و به جمع آوری و بررسی اطلاعات شبکه های اجتماعی در جهت اهداف دیجیتال مارکتینگ مشغول است
socialo.net

⚖️ شرایط:
- آشنایی با #python
- آشنایی #mongodb
- آشنایی elasticsearch#
- داشتن روحیه کارگروهی


💵 مزایا:
- #قابلیت_فعالیت_بصورت_هم_بنیانگذار
- شرایط #قابل_مذاکره
- حضور در محیط پویا و فعال کارآفرینی
- امکان فعالیت به صورت پاره وقت و دورکاری



☎️ اطلاعات تماس:
@mr_asg
09364232989
[email protected]
یادگیری عمیق بدون درد و خونریزی با لودویگ - https://is.gd/DVrYHc
ابزار و کتابخانه ها
, #اوبر, #پردازش_تصویر, #پردازش_زبان_طبیعی, #پردازش_متن, #لودویگ, #یادگیری_عمیق
در این نوشتار به بررسی کتابخانه جدید لودویگ که محصول تیم هوش مصنوعی شرکت اوبر است می‌پردازیم و می‌بینیم که چگونه می‌توان بدون یک خط کدنویسی، مدل‌های پیش‌گویی کننده حرفه‌ای به کمک یادگیری عمیق ساخت و از آنها در کاربردهای واقعی استفاده کرد.