Forwarded from مفتا - ناشنیده‌های تکنولوژی
✅ هشت پیش بینی و گرایش بیگ دیتا در سال ۲۰۱۶
۱- استفاده بیشتر از NoSQL
۲- استفاده از Apache Spark در بیگ دیتا
۳- تکامل پروژه Hadoop
۴- بیگ دیتا رشد خواهد کرد و Hadoop به استاندارد شرکت ها می افزاید.
۵- بیگ دیتا سریع تر خواهد شد : گزینه ها برای اضافه کردن به سرعت پردازش Hadoop افزایش می یابد.
۶- گزینه هایی برای آماده سازی کاربر نهایی برای کشف تمام اشکال رشد داده
۷- رشد پایگاه داده ها در ابر
۸- این واژه ها همگرا می شوند: اینترنت اشیا، ابر و بیگ دیتا
🌎: https://mfta.ir/data-science/id=12144
🆔: @mfta_ir
۱- استفاده بیشتر از NoSQL
۲- استفاده از Apache Spark در بیگ دیتا
۳- تکامل پروژه Hadoop
۴- بیگ دیتا رشد خواهد کرد و Hadoop به استاندارد شرکت ها می افزاید.
۵- بیگ دیتا سریع تر خواهد شد : گزینه ها برای اضافه کردن به سرعت پردازش Hadoop افزایش می یابد.
۶- گزینه هایی برای آماده سازی کاربر نهایی برای کشف تمام اشکال رشد داده
۷- رشد پایگاه داده ها در ابر
۸- این واژه ها همگرا می شوند: اینترنت اشیا، ابر و بیگ دیتا
🌎: https://mfta.ir/data-science/id=12144
🆔: @mfta_ir
Forwarded from متخصصان هوش تجاری
@BIexperts
|
تاریخچه هدوپ
|
هدوپ توسط آقای Doug Cutting اختراع شده است، ایشان پیش تر Apache Lucene را که به عنوان یک کتابخانه پرکاربرد جستجوی متن می باشد، ایجاد کرده است. اصل هدوپ به Apache Nutch ، موتور جستجوی تحت وب متن بازی که خودش قسمتی از پروژه Lucene است، برمی گردد.
هدوپ یک کلمه اختصاری نیست، نامی است که فرزند ایشان بروی یک فیل عروسکی زرد رنگ توپولو گذاشته است.
ساخت کامل یک موتور جستجوی وب، کار دشواری می باشد. نه تنها تولید نرم افزاری که بتواند وب سایت های متعددی را بررسی نموده و برای آنها شاخص تولید نماید مشکل است، بلکه این کار بدون همراهی یک تیم عملیاتی کارآمد امکان پذیر نمی باشد. Mike Cafarella و Doug Cutting برآورد کرده بودند سیستمی که بتواند شاخص میلیاردی تولید و نگهداری نماید در حدود نیم میلیون دلار هزینه سخت افزاری دارد و در حدود سی هزار دلار هزینه نگهداری آن بصورت ماهانه می باشد. اما با همه این مسائل، آنها معتقد بودند که کار بسیار ارزنده ای خواهد بود زیرا می تواند باعث هر چه بهتر شدن الگوریتم های موتورهای جستجو گردد....
|
https://biexperts.ir/?p=414
|
تاریخچه هدوپ
|
هدوپ توسط آقای Doug Cutting اختراع شده است، ایشان پیش تر Apache Lucene را که به عنوان یک کتابخانه پرکاربرد جستجوی متن می باشد، ایجاد کرده است. اصل هدوپ به Apache Nutch ، موتور جستجوی تحت وب متن بازی که خودش قسمتی از پروژه Lucene است، برمی گردد.
هدوپ یک کلمه اختصاری نیست، نامی است که فرزند ایشان بروی یک فیل عروسکی زرد رنگ توپولو گذاشته است.
ساخت کامل یک موتور جستجوی وب، کار دشواری می باشد. نه تنها تولید نرم افزاری که بتواند وب سایت های متعددی را بررسی نموده و برای آنها شاخص تولید نماید مشکل است، بلکه این کار بدون همراهی یک تیم عملیاتی کارآمد امکان پذیر نمی باشد. Mike Cafarella و Doug Cutting برآورد کرده بودند سیستمی که بتواند شاخص میلیاردی تولید و نگهداری نماید در حدود نیم میلیون دلار هزینه سخت افزاری دارد و در حدود سی هزار دلار هزینه نگهداری آن بصورت ماهانه می باشد. اما با همه این مسائل، آنها معتقد بودند که کار بسیار ارزنده ای خواهد بود زیرا می تواند باعث هر چه بهتر شدن الگوریتم های موتورهای جستجو گردد....
|
https://biexperts.ir/?p=414
Forwarded from متخصصان هوش تجاری
@BIexperts
|
معرفی Radoop - کم کردن موانع برای استفاده از Hadoop
|
Radoop یک شرکت بزرگ تجزیه و تحلیل داده با هدف کم کردن موانع برای استفاده از Hadoop است. بسته Radoop اجازه می دهد تا حتی افراد غیر فنی نیز توانایی دسترسی ، تجزیه و تحلیل و شبیه سازی داده های بزرگ را داشته باشند. برای افراد متخصص علاوه بر امکانات ذکر شده برنامه نویسی ، تجزیه و تحلیل و پیش بینی پیشرفته را فراهم می کند و این دلیل محکمی است که RapidMiner با تکیه بر توانایی هدوپ در پردازش موازی داده های کلان به عنوان محبوب ترین ابزار داده کاوی یکپارچه شناخته شود و کم کم کاربران زیادی را به سمت خود سوق دهد.
|
https://biexperts.ir/?p=417
|
معرفی Radoop - کم کردن موانع برای استفاده از Hadoop
|
Radoop یک شرکت بزرگ تجزیه و تحلیل داده با هدف کم کردن موانع برای استفاده از Hadoop است. بسته Radoop اجازه می دهد تا حتی افراد غیر فنی نیز توانایی دسترسی ، تجزیه و تحلیل و شبیه سازی داده های بزرگ را داشته باشند. برای افراد متخصص علاوه بر امکانات ذکر شده برنامه نویسی ، تجزیه و تحلیل و پیش بینی پیشرفته را فراهم می کند و این دلیل محکمی است که RapidMiner با تکیه بر توانایی هدوپ در پردازش موازی داده های کلان به عنوان محبوب ترین ابزار داده کاوی یکپارچه شناخته شود و کم کم کاربران زیادی را به سمت خود سوق دهد.
|
https://biexperts.ir/?p=417
Forwarded from متخصصان هوش تجاری
@BIexperts
معرفی Radoop
@BIexperts
Radoop یک شرکت بزرگ تجزیه و تحلیل داده با هدف کم کردن موانع برای استفاده از Hadoop است. بسته Radoop اجازه می دهد تا حتی افراد غیر فنی نیز توانایی دسترسی ، تجزیه و تحلیل و شبیه سازی داده های بزرگ را داشته باشند. برای افراد متخصص علاوه بر امکانات ذکر شده برنامه نویسی ، تجزیه و تحلیل و پیش بینی پیشرفته را فراهم می کند و این دلیل محکمی است که RapidMiner با تکیه بر توانایی هدوپ در پردازش موازی داده های کلان به عنوان محبوب ترین ابزار داده کاوی یکپارچه شناخته شود و کم کم کاربران زیادی را به سمت خود سوق دهد.
Radoop محیطی گرافیکی و بسیار راحت برای تحلیل داده های کلان بر روی هدوپ فراهم می کند و همه اینها به این بستگی دارد که ما پیکربندی دقیق و بدون نقصی را برای نصب این افزونه تحلیل داده های کلان انجام دهیم. Radoop از ترکیبRapidMiner و هدوپ بوجود آمده البته وجود Hive در این افزونه به نظر الزامیست نه به این معنی که بدون Hive کار کردن غیر ممکن است بلکه به دلیل که Hive قدرتمند، انعطاف پذیر و آسان برای کار کردن است.
Radoop یک نرم افزاری است که عملیات پردازش داده های عظیم را به کلاسترهای هدوپ سپرده و به وسیله قدرت تحلیل داده ای رپیدماینر آن را به صورت گرافیکی به کابر خود نشان می دهد. لزومی نیست که Rapid miner بر روی کلاسترها نصب و راه اندازی شود و هر قسمت وظیفه دارد عملیات مخصوص به خود را انجام دهد.
معماری دیاگرام Radoop
RapidMiner Server نیز قادر است از Radoop استفاده کند. از فعالیتهایی که سرور RapidMiner می تواند انجام دهد می توان برنامه ریزی برای پردازشها، مدیریت و ثبت گزارش پردازشها، فراهم آوردن ابزارهای گزارشگیری بصری می باشد. RapidMiner Server
معماری دیاگرام RapidMiner Server در Radoop
اگر شما از قبل RapidMiner را نصب کرده اید فقط کافی است Radoop را نصب و اجرا کنید در عیر اینصورت نیاز است ابتدا شما آخر ورژن RapidMiner که JAR فایل می باشد دانلود کرده سپس در مسیر lib/plugins/ قرار دهید و در ادامه می توانید اقدام به نصب و راه اندازی آن کنید.
نویسنده: جمال مکتوبیان
منبع: وب سایت هدوپ https://hadoop.ir/
معرفی Radoop
@BIexperts
Radoop یک شرکت بزرگ تجزیه و تحلیل داده با هدف کم کردن موانع برای استفاده از Hadoop است. بسته Radoop اجازه می دهد تا حتی افراد غیر فنی نیز توانایی دسترسی ، تجزیه و تحلیل و شبیه سازی داده های بزرگ را داشته باشند. برای افراد متخصص علاوه بر امکانات ذکر شده برنامه نویسی ، تجزیه و تحلیل و پیش بینی پیشرفته را فراهم می کند و این دلیل محکمی است که RapidMiner با تکیه بر توانایی هدوپ در پردازش موازی داده های کلان به عنوان محبوب ترین ابزار داده کاوی یکپارچه شناخته شود و کم کم کاربران زیادی را به سمت خود سوق دهد.
Radoop محیطی گرافیکی و بسیار راحت برای تحلیل داده های کلان بر روی هدوپ فراهم می کند و همه اینها به این بستگی دارد که ما پیکربندی دقیق و بدون نقصی را برای نصب این افزونه تحلیل داده های کلان انجام دهیم. Radoop از ترکیبRapidMiner و هدوپ بوجود آمده البته وجود Hive در این افزونه به نظر الزامیست نه به این معنی که بدون Hive کار کردن غیر ممکن است بلکه به دلیل که Hive قدرتمند، انعطاف پذیر و آسان برای کار کردن است.
Radoop یک نرم افزاری است که عملیات پردازش داده های عظیم را به کلاسترهای هدوپ سپرده و به وسیله قدرت تحلیل داده ای رپیدماینر آن را به صورت گرافیکی به کابر خود نشان می دهد. لزومی نیست که Rapid miner بر روی کلاسترها نصب و راه اندازی شود و هر قسمت وظیفه دارد عملیات مخصوص به خود را انجام دهد.
معماری دیاگرام Radoop
RapidMiner Server نیز قادر است از Radoop استفاده کند. از فعالیتهایی که سرور RapidMiner می تواند انجام دهد می توان برنامه ریزی برای پردازشها، مدیریت و ثبت گزارش پردازشها، فراهم آوردن ابزارهای گزارشگیری بصری می باشد. RapidMiner Server
معماری دیاگرام RapidMiner Server در Radoop
اگر شما از قبل RapidMiner را نصب کرده اید فقط کافی است Radoop را نصب و اجرا کنید در عیر اینصورت نیاز است ابتدا شما آخر ورژن RapidMiner که JAR فایل می باشد دانلود کرده سپس در مسیر lib/plugins/ قرار دهید و در ادامه می توانید اقدام به نصب و راه اندازی آن کنید.
نویسنده: جمال مکتوبیان
منبع: وب سایت هدوپ https://hadoop.ir/
Forwarded from Data Science
برترین ابزارهای Social Network Analysis
https://www.linkedin.com/pulse/top-social-network-analysis-software-mohamadreza-mohtat?trk=mp-reader-card
https://www.linkedin.com/pulse/top-social-network-analysis-software-mohamadreza-mohtat?trk=mp-reader-card
مقالات سری دوم کاربرد داده کاوی در پزشکی
https://ostadrahnamaonline.ir/forum/showthread.php?tid=69
https://ostadrahnamaonline.ir/forum/showthread.php?tid=69
Forwarded from پردازش تصویر(Digital Image Processing)
opencv2refman_book.pdf
5.8 MB
مقالات کاربرد داده کاوی در مشاغل مختلف:
لینک دانلود
https://ostadrahnamaonline.ir/forum/showthread.php?tid=70
لینک دانلود
https://ostadrahnamaonline.ir/forum/showthread.php?tid=70
بیش از سی مقاله با موضوع تشخیص تقلب در کارتهای اعتباری
لینک دانلود:
https://ostadrahnamaonline.ir/forum/showthread.php?tid=71
لینک دانلود:
https://ostadrahnamaonline.ir/forum/showthread.php?tid=71
بیست مقاله معتبر و جدید درباره Big Data
https://ostadrahnamaonline.ir/forum/showthread.php?tid=72
https://ostadrahnamaonline.ir/forum/showthread.php?tid=72
فصل آخر کتاب شبیه سازی محاسبات ابری نویسنده سیدرضا پاکیزه -آموزش cloud sim به زبان فارسی
[Forwarded from Computer Research]
لینک دانلود pdf کتاب:
ostadrahnamaonline.ir/forum/articles/cloud%20computing/cloudsim.rar
لینک دانلود pdf کتاب:
ostadrahnamaonline.ir/forum/articles/cloud%20computing/cloudsim.rar
آموزش MapReduce به زبان ساده
https://hadoop.ir/%D8%A2%D9%85%D9%88%D8%B2%D8%B4-mapreduce-%D8%A8%D9%87-%D8%B2%D8%A8%D8%A7%D9%86-%D8%B3%D8%A7%D8%AF%D9%87-%D8%A8%D8%AE%D8%B4-%D8%AF%D9%88%D9%85/
https://hadoop.ir/%D8%A2%D9%85%D9%88%D8%B2%D8%B4-mapreduce-%D8%A8%D9%87-%D8%B2%D8%A8%D8%A7%D9%86-%D8%B3%D8%A7%D8%AF%D9%87-%D8%A8%D8%AE%D8%B4-%D8%AF%D9%88%D9%85/
مرجع هدوپ ایران
آموزش MapReduce به زبان ساده – بخش دوم
در بخش اول به آموزش مفهوم MapReduce در هدوپ پرداختیم. حال در بخش دوم این مقاله می خواهیم به بررسی عملی و پیاده سازی مثالی که در بخش اول مطرح شد یعنی شمارش تعداد کلمات بپرد...
Forwarded from cloud & cloudsim
همراهان عزیز 🌺 قسمت اول آموزش شبیه ساز Cloudsim تقدیمتون میشه 👇👇👇
Forwarded from cloud & cloudsim
دوستان عزیز 🌸 قسمت دوم آموزش شبیه ساز Cloudsim تقدیمتون میشه 👇👇👇