معماری برای تحلیل کلان داده ها :
تحلیل Real-Time در مقابل تحلیل off-line
تحلیل در سطوح مختلف
تحلیل با پیچیدگی متفاوت
در ادامه هر کدام را با هم بررسی خواهیم کرد.
@BigDataTechnology
تحلیل Real-Time در مقابل تحلیل off-line
تحلیل در سطوح مختلف
تحلیل با پیچیدگی متفاوت
در ادامه هر کدام را با هم بررسی خواهیم کرد.
@BigDataTechnology
تحلیل Real-Time :
وقتی داده های پیوسته در حال تغییر هستند، تحلیل سریع داده نیاز است و نتیجه با تاخیر خیلی کوتاه باید برگردد.
انواع معماری موجود :
1- خوشه های پردازشی با استفاده از پایگاه داده رابطه سنتی
2- سکوی محاسباتی مبتنی بر حافظه
مورد استفاده : تجارت الکترونیک و امور مالی
مثال : Greenplum از EMC و hana از SAP
منبع : کتاب کلان داده ها ترجمه دکتر امیر مسعود رحمانی
وقتی داده های پیوسته در حال تغییر هستند، تحلیل سریع داده نیاز است و نتیجه با تاخیر خیلی کوتاه باید برگردد.
انواع معماری موجود :
1- خوشه های پردازشی با استفاده از پایگاه داده رابطه سنتی
2- سکوی محاسباتی مبتنی بر حافظه
مورد استفاده : تجارت الکترونیک و امور مالی
مثال : Greenplum از EMC و hana از SAP
منبع : کتاب کلان داده ها ترجمه دکتر امیر مسعود رحمانی
تحلیل off- line :
معمولا برای کاربردهایی که احتیاج به زمان پاسخ سریع ندارند استفاده میشود.
مثل :
تحلیل آماری
الگوریتم های توصیه گر
بسیاری از شرکت های اینترنتی از این معماری مبتنی بر هدوپ برای کاهش هزینه ی تبدیل قالب داده ها و بهبود کارایی اکتساب داده ها استفاده میکنند.
معمولا برای کاربردهایی که احتیاج به زمان پاسخ سریع ندارند استفاده میشود.
مثل :
تحلیل آماری
الگوریتم های توصیه گر
بسیاری از شرکت های اینترنتی از این معماری مبتنی بر هدوپ برای کاهش هزینه ی تبدیل قالب داده ها و بهبود کارایی اکتساب داده ها استفاده میکنند.
ذهن شما مانند چتر نجات است،
تنها هنگامی که باز شود ، عمل می کند.💡
سلام و درود فراوان بر همراهان عزیز بیگ دیتا🌷
امروز با یاد پروردگار مطالب معماری تحلیل کلان داده ها را ادامه خواهیم داد.🙏
با تشکر از توجه شما ⛄
گلناز اردشیری
@BigDataTechnology
تنها هنگامی که باز شود ، عمل می کند.💡
سلام و درود فراوان بر همراهان عزیز بیگ دیتا🌷
امروز با یاد پروردگار مطالب معماری تحلیل کلان داده ها را ادامه خواهیم داد.🙏
با تشکر از توجه شما ⛄
گلناز اردشیری
@BigDataTechnology
عرضه پلتفرم متنباز اینتل مخصوص تحلیل کلان دادهها
ایتنا - سیستم TAP انواع مختلف الگوریتمها، ابزارها و موتورهای هوشمند را برای تحلیل و یکپارچه سازی کلان دادهها در خود جا داده است.
شرکت اینتل نمونه اولیه سیستم جدیدی را با نام Trusted Analytics Platform ارائه کرد و توضیح داد این پلتفرم مجموعهای از ابزارهای متنباز محسوب میشود که برای پیادهسازی آسان پروژههای کلان داده در سازمانها ارائه شده است.
به گزارش ایتنا از رایورز به نقل از زد.دی.نت، سیستم Trusted Analytics Platform که با نام اختصاری TAP هم شناخته میشود، در ماه آگوست از سال جاری میلادی در «فروم توسعهدهندگان اینتل» معرفی شد. سپس «ران کاسابیان» مدیر مرکز کلان دادههای اینتل در کنفرانس Strata + Hadoop World که در نیویورک برگزار شده بود، جزئیات بیشتری از آن را ارائه کرد.
سیستم TAP انواع مختلف الگوریتمها، ابزارها و موتورهای هوشمند را برای تحلیل و یکپارچه سازی کلان دادهها در خود جا داده است. این نرمافزار که به صورت متن باز ساخته شده است، با معماری اینتل و سختافزارهای ساخته شده در این شرکت سازگاری دارد.
سیستم TAP بخشهای زیر را شامل میشود:
- یک لایه دادهای که سیستمهای Apache Hadoop و Spark را برای سختافزارهای اینتل در خود جا داده است
- یک لایه تحلیلی باز که میتواند از رابطهای برنامهنویسی نرمافزاری برای پیشبینیهای سازمانی پشتیبانی کند
- قابلیت ویژه برای پشتیبانی از ابزارهای مخصوص فضای پردازش ابری
کاسابیان در مصاحبه اخیر خود توضیح داد که اینتل سری مختلف ابزارهای مخصوص کلان داده را با سیستم TAP سازگار کرده است تا امکان استقرار آسان آن در سازمانهای مختلف فراهم شود.
اینتل که بزرگترین تولیدکننده تراشههای رایانهای در جهان محسوب میشود، سازگاری با اکوسیستم کلان دادهها و سیستمهای پردازش ابری را مهمترین اولویت خود برای حضور در بازارهای رقابتی میداند.
ایتنا - سیستم TAP انواع مختلف الگوریتمها، ابزارها و موتورهای هوشمند را برای تحلیل و یکپارچه سازی کلان دادهها در خود جا داده است.
شرکت اینتل نمونه اولیه سیستم جدیدی را با نام Trusted Analytics Platform ارائه کرد و توضیح داد این پلتفرم مجموعهای از ابزارهای متنباز محسوب میشود که برای پیادهسازی آسان پروژههای کلان داده در سازمانها ارائه شده است.
به گزارش ایتنا از رایورز به نقل از زد.دی.نت، سیستم Trusted Analytics Platform که با نام اختصاری TAP هم شناخته میشود، در ماه آگوست از سال جاری میلادی در «فروم توسعهدهندگان اینتل» معرفی شد. سپس «ران کاسابیان» مدیر مرکز کلان دادههای اینتل در کنفرانس Strata + Hadoop World که در نیویورک برگزار شده بود، جزئیات بیشتری از آن را ارائه کرد.
سیستم TAP انواع مختلف الگوریتمها، ابزارها و موتورهای هوشمند را برای تحلیل و یکپارچه سازی کلان دادهها در خود جا داده است. این نرمافزار که به صورت متن باز ساخته شده است، با معماری اینتل و سختافزارهای ساخته شده در این شرکت سازگاری دارد.
سیستم TAP بخشهای زیر را شامل میشود:
- یک لایه دادهای که سیستمهای Apache Hadoop و Spark را برای سختافزارهای اینتل در خود جا داده است
- یک لایه تحلیلی باز که میتواند از رابطهای برنامهنویسی نرمافزاری برای پیشبینیهای سازمانی پشتیبانی کند
- قابلیت ویژه برای پشتیبانی از ابزارهای مخصوص فضای پردازش ابری
کاسابیان در مصاحبه اخیر خود توضیح داد که اینتل سری مختلف ابزارهای مخصوص کلان داده را با سیستم TAP سازگار کرده است تا امکان استقرار آسان آن در سازمانهای مختلف فراهم شود.
اینتل که بزرگترین تولیدکننده تراشههای رایانهای در جهان محسوب میشود، سازگاری با اکوسیستم کلان دادهها و سیستمهای پردازش ابری را مهمترین اولویت خود برای حضور در بازارهای رقابتی میداند.
شرکت سیسکو اعلام کرد که میخواهد گامهای بلندتری در عرصه اینترنت اشیاء(IoT) بردارد و در این زمینه محصولات تخصصی خود را برای کارخانهها، سیستمهای حمل و نقل، مراکز خدماتی و صنایع نفت و گاز ارائه دهد.
به گزارش ایتنا از رایورز به نقل از زد.دی.نت، سیسکو به منظور انجام بخشی از این سرمایهگذاری بزرگ روز گذشته اعلام کرد شرکت ParStream را خریداری کرده است. این شرکت به صورت ویژه محصولات تخصصی در زمینه مراکز داده تحلیلی را ارائه میدهد و شرکتهای مختلف امکان میهد تا حجم وسیع اطلاعات را در آن واحد تحقیق کنند و بتوانند نتایج آن را در زمینههای گوناگون مورد استفاده قرار دهند.
به گفته سیسکو، این خرید هماکنون مراحل پایانی خود را به سر میبرد و پیشبینی شده است که واگذاری کامل در پایان فصل دوم سال مالی ۲۰۱۶ انجام شود.
«راب سالوانیو» مدیر سرمایهگذاری سیسکو توضیح داد که خرید شرکت ParStream به آنها کمک میکند تا بتوانند سریعتر و وسیعتر از قلب کلان دادهها را تحلیل کنند، از این تحلیلها نتایج دقیقتری ارائه دهند و میلیونها داده را در آن واحد فیلتر کنند تا کسب و کارهای مختلف بتوانند از اطلاعات موجود به صورت کاربردی استفاده کنند.
به گزارش ایتنا از رایورز به نقل از زد.دی.نت، سیسکو به منظور انجام بخشی از این سرمایهگذاری بزرگ روز گذشته اعلام کرد شرکت ParStream را خریداری کرده است. این شرکت به صورت ویژه محصولات تخصصی در زمینه مراکز داده تحلیلی را ارائه میدهد و شرکتهای مختلف امکان میهد تا حجم وسیع اطلاعات را در آن واحد تحقیق کنند و بتوانند نتایج آن را در زمینههای گوناگون مورد استفاده قرار دهند.
به گفته سیسکو، این خرید هماکنون مراحل پایانی خود را به سر میبرد و پیشبینی شده است که واگذاری کامل در پایان فصل دوم سال مالی ۲۰۱۶ انجام شود.
«راب سالوانیو» مدیر سرمایهگذاری سیسکو توضیح داد که خرید شرکت ParStream به آنها کمک میکند تا بتوانند سریعتر و وسیعتر از قلب کلان دادهها را تحلیل کنند، از این تحلیلها نتایج دقیقتری ارائه دهند و میلیونها داده را در آن واحد فیلتر کنند تا کسب و کارهای مختلف بتوانند از اطلاعات موجود به صورت کاربردی استفاده کنند.
Trusted Analytics Platform (TAP) is open source software, optimized for performance and security, that accelerates the creation of Cloud-native applications driven by Big Data Analytics.
TAP makes it easier for developers and data scientists at enterprises, Cloud Service Providers and System Integrators, to collaborate by providing a shared, flexible environment for advanced analytics in public and private Clouds.
The project brings together many proven and familiar open-source components, integrating them in one platform. Its capabilities are exposed as easy-to-consume services while preserving the benefit of the many vibrant communities behind these open source projects.
https://trustedanalytics.org/
TAP makes it easier for developers and data scientists at enterprises, Cloud Service Providers and System Integrators, to collaborate by providing a shared, flexible environment for advanced analytics in public and private Clouds.
The project brings together many proven and familiar open-source components, integrating them in one platform. Its capabilities are exposed as easy-to-consume services while preserving the benefit of the many vibrant communities behind these open source projects.
https://trustedanalytics.org/
هر چه در مقام بالاتری ایستاده باشیم،
باید با فروتنی بیشتری روی این زمین گام برداریم.
با سلام و عرض ادب خدمت دوستان و همراهان عزیز بیگ دیتا.🌷
امیدوارم به لطف پروردگار آدینه زمستانی گرم و سرشار از سلامتی،شادی و شادکامی پیش رو داشته باشید.✨🌟
همان طور که قبلا گفتم، روزهای جمعه مقالات روز در رابطه با رایانش ابری و بیگ دیتا در اختیار شما عزیزان قرار خواهم داد.📑📔
امیدوارم مطالب مفید و مورد رضایت شما دوستان قرار گرفته باشد.📚
با تشکر از توجه شما 🙏
گلناز اردشیری
@BigDataTechnology
باید با فروتنی بیشتری روی این زمین گام برداریم.
با سلام و عرض ادب خدمت دوستان و همراهان عزیز بیگ دیتا.🌷
امیدوارم به لطف پروردگار آدینه زمستانی گرم و سرشار از سلامتی،شادی و شادکامی پیش رو داشته باشید.✨🌟
همان طور که قبلا گفتم، روزهای جمعه مقالات روز در رابطه با رایانش ابری و بیگ دیتا در اختیار شما عزیزان قرار خواهم داد.📑📔
امیدوارم مطالب مفید و مورد رضایت شما دوستان قرار گرفته باشد.📚
با تشکر از توجه شما 🙏
گلناز اردشیری
@BigDataTechnology