بزرگترین همایش فناوری دنیا ساعاتی پیش شروع شد. بسیار جالب بود که در مراسم افتتاحیه ادوارد اسنودن که اطلاعات طبقه بندی شده را منتشر می کند مهمان اسکایپی بود و نقطه نظراتی را همانطور که در بند دو متن بالا نوشتم مطرح کرد.

اسنودن به طور خلاصه به این نکته اشاره کرد که صحبت در رابطه با قوانین حفظ حریم داده خصوصی از اساس اشتباه است!
چراکه داده خصوصی اصلا نباید جمع آوری شود تا برای حفظ ان قانون نیاز باشد!

استفاده از امکانات مدرسه کسب و کار هوش مصنوعی مایکروسافت مجانی است.
www.microsoft.com/en-us/ai/ai-business-school

کانال سواد داده و آمار

مباحث بخش فناوری و تحلیل نوین داده در بزرگترین همایش فناوری دنیا، بصورت خلاصه:

۱- محوریت حفظ حریم خصوصی، نیاز به شفاف سازی عملیات تحلیل داده و فناوری های نوین مانند فضای کلود، کلان داده، اینترنت اشیا و هوش مصنوعی در مباحث به چشم می خورد.

۲- یکی از نکات جالب که مطرح شد این بود که برای استفاده از داده در کسب وکار باید دسترسی شفاف، آسان و قابل فهم اطلاعات و فناوری نهادها را به مردم داد نه اینکه دسترسی به کل داده ها و اطلاعات خصوصی مردم را به نهادها داد!

۳- نکته جالب دیگر این بود که در پیاده سازی فناوری های نوین باید همواره سادگی درک پروسه کاری را در نظر گرفت. برخی فناوری های پیاده سازی شده بسیار پیچیده هستند ولی اپلیکیشنی که بر روی این بستر پیچیده طراحی شده قابل درک و استفاده است. مهم است فرآیند پس زمینه نیز پیچیگی های زیادی نداشته باشد. چراکه پیچیدگی باعث ایجاد ریسک می شود و موسسات سعی می کنند تا جای ممکن روش ها را قابل فهم و ریسک را قابل مدیریت کنند.

۳- فناوری های نوین زمانی موفق خواهند شد که در همکاری با نهادهای بزرگ قدم بردارند. مهم است که در پیاده سازی یک فناوری، فهم مشترک و توافق همگانی وجود داشته باشد. در غیر اینصورت کار به سرانجام نخواهد رسید.

۴- زمانی درک نحوه سرمایه گذاری مانند سواد خواندن و نوشتن در گذشته در انحصار بود. در حال حاصر فناوری کمک کرده تا پیچیدگی ها توسط سیستم حل شوند و همه بتوانند در رابطه با مدیریت منابع خود شخصا تصمیم درست بگیرند.

۵-حفظ حریم خصوصی و عدم دریافت داده های غیرضروری برای نهادهای داده محور از سمت مشتریان واجب خواهد شد. مشتریان بیش از گذشته به حقوق خود آگاه شده اند و در فضای جدید ریسک شهرت نهادهایی که به حقوق داده و حریم خصوصی احترام نمی گذارند به شدت زیاد شده است.

۶- نسل جدید 5G تاخیر در انتقال داده را از بین خواهد برد ‌و در آینده نزدیک فرآیندهای برخط در زمان واقعی و در سطح گسترده انجام خواهند شد. بنابراین ارایه خدمات آنلاین و بدون وقفه بصورت گسترده و استفاده از هوش مصنوعی بجای انسان بسیار طبیعی خواهد بود.

۷- با توجه به تحولات بنیادی مفاهیمی مانند پول، سرمایه گذاری و مدیریت منابع، ریسک و فرآیندها نیاز به متخصصین جدید، قوانین سازگار با تحولات و توسعه در نهادهای حاکمیتی بسیار مهم است.

۸- علوم دانشگاهی نیازمند هماهنگی با تحولات شده اند و نقش دانشگاه ها و متخصصین حوزه های جدید در کمک به نهادها و سازمان ها پر رنگ است.

امیدوارم مطالب خلاصه فوق توانسته باشد مقداری فضای کنونی اینگونه مباحث را منتقل کند.

شاد و تندرست باشید./آشفته
@IASE_ISLP

🌐 یک مقام مسئول در مرکز آمار:
اگر بانک مرکزی عدد نرخ رشد اقتصادی را به ما ندهد، بدون تاییدیه بانک مرکزی نرخ رشد اقتصادی را اعلام می‌کنیم/ ۳ بار به بانک مرکزی نامه زدیم؛ جواب ندادند.

✍ دقت کنیم. صحبت از انتشار نرخ رشد اقتصادی یک کشور است.
روز اول آبان روز آمار و برنامه ریزی پیامی داشتم که در زیر مجددا می آورم. دوستی از دست اندرکاران آمار رسمی کشور پیام دادند که مشکل مرکز آمار ایران و بانک مرکزی حل شده است و باعث خوشحالی شدند. ولی اکنون با خبر فوق مشخص می شود اینطور نیست.

مشکلی که در دنیا بیش از بیست سال است حل شده و راه و روش آن را در فصل اول کتاب "مدیریت نوین آمار و اطلاعات" به فارسی کاملا تشریح کرده ام تا شاید بخوانند، حال باید گریبانگیر دو نهاد بزرگ آمار رسمی کشور باشد.

به مسئولین هر دو نهاد آمارهای رسمی، مرکز آمار ایران و بانک مرکزی، پیشنهاد می کنم به موارد زیر توجه عاجل کنند و آمارهای رسمی را از وضعیت نامناسب کنونی برهانند:
۱- تکمیل پروتکل به اشتراک گذاری چارچوب های آماری
۲- تهیه پروتکل نحوه همکاری مراجع آمارهای رسمی
۳- تکمیل پروتکل نحوه همکاری در حساب های ملی، ترازپرداخت های کشور، دارایی بدهی خانوار و آمار و اطلاعات عمومی و اقتصادی کشور
۴- تهیه پروتکل نحوه استقلال مراکز آمار رسمی کشور
۵- سامان دهی ساختار و فرآیندهای سیستم آمارهای رسمی کشور

با تمرکز و توجه به موارد عمده فوق و برخی موارد جزیی تر دیگر، مشکل آمارهای رسمی کشور حل خواهد شد اگر بخواهیم.

با مسائل عمومی رویکرد حل مسئله داشتن مهمتر از هرچیز دیگر است. مسایل را بجای برون فکنی باید حل کرد چراکه عایدی جز هدر دادن منابع و داشته های ملی در پی نخواهد داشت.

📒📎سابقه:

روز اول آبان روز آمار و برنامه ریزی !

چندسالی است در سخنرانی ها و مجامع تخصصی، مطلبی مهم را به بحث و بررسی گذاشته ایم.

شایسته است امسال این روز را به روزی جهت آغاز همدلی و هماهنگی آمارهای رسمی کشور تبدیل کنیم.

همکاری بین نهادهای مسئول آمارهای رسمی کشور فواید فراوانی دارد:

۱- مسئولیت های نهادهای مختلف شفاف سازی می شود.
۲- به یکپارچه سازی آمار و داده در کشور کمک می کند.
۳- به ایجاد لغات، مفاهیم، تعاریف و استانداردهای مشترک کمک می کند و این باعث تسهیل در ایجاد پلتفرم های جامع برای جمع آوری داده از منابع مختلف و به اشتراک گذاری ساده آن خواهد شد.
۴- دوباره کاری، گزارش های متناقض و بار پاسخگویی منابع اطلاع به طور محسوسی کاهش خواهد یافت.
۵- تبادل داده و تجربه در بین دستگاه های تولید آمار رسمی کشور افزایش خواهد یافت.

چگونه؟
آنچه در دنیا سال ها عملی شده است:
۱- توسعه سیستم ملی آمار رسمی NSS با
پیوستن بانک مرکزی، مرکز آمار و دیگر نهادهای سازمانی تولید آمارهای رسمی به آن
National Statistical System
۲- ایجاد یک تفاهم نامه همکاری مشترک
Memorandum of understanding
۳- ایجاد بستر همکاری در گردآوری هماهنگ داده و تولید آمارهای رسمی
Integrated Management of Official Statistics

مهمترین دست اندرکاران که با احترام متقابل باید بانی این حرکت باشند:
مرکز آمار، بانک مرکزی، انجمن آمار

فرصت را غنیمت خواهیم شمرد اگر بدانیم خیلی زود دیر می شود.

آشفته/آبان ۱۳۹۸



✅ کانال سواد داده و آمار

🆔 @IASE_ISLP

🗓 پاور بی آی و هوش تجاری

به روزرسانی ماه نوامبر پاوربی آی بسیار جالب است.

بسیاری امکانات مهم در چندین زمینه در این به روزرسانی وجود دارد.  یک افزونه جدید و مدرن و چندین ظاهر جدید مانند آنچه در آفیس مرسوم است که یکی از ایده های درخواست شده در جامعه حرفه ای پاور بی آی بود بعلاوه عملکردهای هوش مصنوعی با آژور و سرویس های کاگنتیو در پاورکویری ، یک اتصال دهنده جدید در میان امکانات بسیار دیگر.

در سایت مایکروسافت می توانید امکانات جدید را مطالعه کنید.

@IASE_ISLP

فیلم بخشی از کلاس مربوط به مبحث ریسک نرخ سود، ریسک قیمت و مدیریت سبد دارایی و بدهی در پاسخ به سوالات برخی دوستان فعال در حوزه ریاضیات مالی/افشین آشفته. آذر ۱۳۹۸

@IASE_ISLP

https://gapnashr.com/
فصل اول: ساختار مدیریت آمار و اطلاعات
فصل دوم: فرآیندهای مدیریت آمار و اطلاعات
فصل سوم: مدیریت کیفیت آمار و اطلاعات
فصل چهارم: مدیریت فناوری آمار و اطلاعات
فصل پنجم: آمار و اطلاعات و مدیریت ریسک
https://gapnashr.com/

در کدام قسمت دارای مزیت رقابتی هستیم؟
تحلیل مناسب: معادلات ساختاری
به چه نسبت در هر بخش سرمایه گذاری کنیم؟
تحلیل مناسب: مدل های طبقه بندی و تعیین سهم
حداکثر چقدر ظرفیت سود در سال آینده خواهیم داشت؟
تحلیل مناسب: مدل های یادگیری ماشین وابسته به زمان

🆔 @IASE_ISLP

نوروزتان پیروز، مهرتان پایدار.🎉💐

🆔 @IASE_ISLP

سلام و عرض ادب.
اگر به اطلاعات کروناویروس علاقه مندید این مطلب را ملاحظه کنید.
پس از اعلام بیماری کرونا و انتشار اولیه آن کار تحقیقاتی را در رابطه با اثرات بهداشتی، اقتصادی و مالی آن شروع کردم که مقاله اول در حال داوری و مقاله دوم در حال نگارش است.
در این راستا به علت وجود اشتباه های فاحش در دیتابیس های عمومی در اینترنت مانند داده های دانشگاه جان هاپکینز و دیگر دیتابیس هایی که روزانه به روزرسانی می شوند تصمیم برآن شد که توسط متن کاوی و بررسی مستقیم گزارش ها، دیتابیسی گردآوری شود که دقت لازم را داشته باشد. از این لحاظ مجموعه داده ای منحصربه فرد گردآوری شده است و به صورت روزانه به آن اضافه می شود. جهت اطلاع دوستان داشبوردی به زبان فارسی تهیه کردم که کلیات این ویروس را به نمایش می گذارد. این گزارش هوش تجاری فعلا شامل 3 صفحه است.

📄 صفحه اول که قابلیت پلی کردن و دیدن وضعیت دنیا در طی زمان را دارد به نحوه شیوع می پردازد.
📄صفحه دوم مربوط به چین است و می توان از آن برای پیشبینی وضعیت هر کشور ایده گرفت.
📄صفحه سوم مربوط به میزان خطر، سرعت شیوع و ریسک کشورها است که در حال تکمیل است.
این داشبورد در آینده با تحلیل های اقتصادی کامل خواهد شد.
بهتر است با لپ تاپ و مانیتور دیده شود. در صورت استفاده از گوشی همراه بهتر است به صورت افقی قرار گیرد.
از نظرات و پیشنهادهای دوستان پیشاپیش سپاسگزارم.
شاد و سلامت باشید. آشفته.

💻 با لپ تاپ و فونت بی میترا بهتر از تلفن همراه دیده می شود.
https://app.powerbi.com/view?r=eyJrIjoiNWYzZDI5MTQtODFlZC00NzhmLWI5OWMtNTE3MTJmMzQxYzUyIiwidCI6ImU0YmQ2OWZmLWU2ZjctNGMyZS1iMjQ3LTQxYjU0YmEyNDkwZSIsImMiOjh9


🆔 @IASE_ISLP

داشبورد کوید-۱۹ با یک مدل پیش بینی به روز شد. گزارش صفحه سوم نیز قابلیت جستجو و فیلتر بر اساس کشور را پیدا کرده است. با لپ تاپ و مانیتور بهتر از گوشی همراه دیده می شود. در صورت استفاده از گوشی، آن را در حالت افقی قرار دهید. ارادتمند/آشفته

آدرس داشبورد کوید-۱۹

https://app.powerbi.com/view?r=eyJrIjoiNWYzZDI5MTQtODFlZC00NzhmLWI5OWMtNTE3MTJmMzQxYzUyIiwidCI6ImU0YmQ2OWZmLWU2ZjctNGMyZS1iMjQ3LTQxYjU0YmEyNDkwZSIsImMiOjh9

🆔 @IASE_ISLP

اهمیت کیفیت داده (از کوزه همان برون تراود که در اوست.)  چندی است در رابطه با صحت و دقت داده های منتشر شده در رابطه با کوید-19 مطالبی می شنویم تا آنجا که بخشی از بودجه سازمان بهداشت جهانی را به چالش کشید. اگر اولین پیام داشبورد کوید-19 که در اختیار دوستان قرار دادیم را مرور کنیم بیاد خواهیم آورد که چندی قبل از این اعتراض ها، در رابطه با کیفیت بسیار پایین داده های منتشر شده که مورد استفاده بسیاری از داشبوردهای جهانی و ملی قرار گرفته بود تذکر داده شد. در آن زمان با استفاده از تکنیک های متن کاوی به بررسی داده های منتشر شده پرداختیم و مقاله ای در مقایسه این داده ها و اطلاعات متناقض نیز نوشتیم که در دست داوری است. بنابر نتایج این تحقیق، اصلاحاتی در حد امکان نیز بر روی داده ها صورت گرفت که داشبورد تقدیمی از آن بهره می برد. شاید این مثال خوبی باشد تا همگی بیاد آوریم ابتدای هر کار علمی بر مبنای داده، بررسی و اندازه گیری علمی میزان صحت داده ها است.  بررسی کیفیت داده ها در مصورسازی می تواند یک محصول حرفه ای علم داده را از آنچه به صورت عادی در شبکه اینترنت وجود دارد متفاوت کند./آشفته
🆔@IASE_ISLP

سوالی مطرح شده در رابطه با آمارهای رسمی که در داشبورد کوید۱۹ استفاده شده و میزان دقت داده های کشورها که توضیحی در این ارتباط می دهم.

ارایه داده و آمار همواره با خطای اندازه گیری همراه است که میتواند سیستماتیک یا تصادفی باشد. این نوع خطا بدیهی است.

آمارهای رسمی از استانداردهای بین المللی مانند SDDS و فریم ورک های کیفیت بهره مندند که هر کشوری بنا به توان خود در رعایت آنها می کوشد. البته برخی کشورها التزام به رعایت آنها ندارند و کاری از کسی ساخته نیست.
بنا به قانون جز آمار رسمی، آمار دیگری قابل انتشار نیست ولی این آمار رسمی قابل راستی آزمایی است.
بنابراین در کارهای حرفه ای آمارهای رسمی همواره دو بخش وجود دارد:
۱- آمارها و داده های رسمی
۲- مدل های تصحیح کننده علمی

در مورد اول مقایسه آمارهای رسمی، بررسی استانداردها، برآورد خطای اندازه گیری، متن کاوی و بررسی توزیع داده ها به انجام برخی اصلاحات فنی و افزایش دقت کمک می کند. کاری که در مطالعه اول ما نیز انجام شده و آمارهای ارایه شده از آمارهای رسمی کشورها با اصلاحاتی که گفته شد بهره برده است. ولی این اصلاحات بنیادی نیست.

در مورد دوم مدل های سری زمانی، یادگیری ماشین و داده کاوی بکار گرفته می شود تا برآوردی از واقعیت به دست آید. این مقادیر می توانند با آمارهای رسمی تفاوت فاحش داشته باشند. آنچه در تحقیق دوم ما مد نظر قرار گرفته و نمای ساده ای از بخش کوچکی از آن را در نمودار پیش بینی گزارش اول داشبورد می توانید ببینید. بر اساس این مدل پیش بینی، علیرغم اینکه آمارهای رسمی در این چند هفته گذشته کاهش را نشان دادند، ولی مدل کاهش را نشان نمی دهد و آن را از هفته دوم اردیبهشت و در صورت رعایت محتمل می داند.

در یک کار حرفه ای هر دو بخش باید وجود داشته باشد و خواننده مقایسه کند. در کار علمی تفاوت بین آنچه بصورت رسمی گزارش می شود و آنچه به نظر مدل های علمی درست است نشان داده می شود و خواننده از هر دو مطلع می شود. در بسیاری موارد آمارهای رسمی به مدل ها جهت برآورد خطای خود نظر دارند.

نکته آخر اینکه به تازگی مطرح شده که در اروپا و آمریکا مواردی از ابتلا یافت شدند که به ژانویه بر می گردند. بنا بر این اطلاع جدید مشخص شده که انتشار بیماری در نقاط مختلف دنیا اختلاف زمانی بسیار کمی داشته است. در صورتیکه تا بیستم آوریل تصور می شد بیماری در این قاره ها از حدود ماه مارس شروع شده است.
جالب اینکه متن کاوی و تحلیل خطای اندازه گیری تحقیق اول ما این مطلب را مشخص کرده بود و در داشبورد نیز از دو ماه پیش نشان داده شده بود که اهمیت متن کاوی، داده کاوی و مقایسه آمارهای رسمی را در نشان دادن بهتر واقعیت مشخص می کند.

در نهایت باید توجه داشته باشیم که کلیه این تحلیل ها از خطای اندازه گیری رنج می برند. این خطا در کشورهای در حال توسعه قابل توجه و در برخی کشورها کمتر است ولی هیچگاه صفر نیست. در مواردی که سیاست نیز دخالت می کند مقدار این خطا بصورت سیستماتیک بیشتر می شود و این حقیقتی است که همواره در دنیا وجود داشته و ربطی به مورد خاص کرونا یا کشور خاصی ندارد. فقط درصد آن متفاوت است و استانداردهای بین المللی سعی کرده اند آن را کاهش دهند.

هدف نهایی گروه تحقیقاتی ما بررسی تاثیر اقتصادی، مالی و ریسک کوید۱۹ است ولی تا تکمیل دو مرحله گفته شده و اطمینان کامل نسبت به داده ها که مواد اولیه تحلیل ریسک است به آن ورود نخواهیم کرد. در این راستا سعی می کنیم قبل از هرگونه تحلیل داده محور، ابتدا بر روی کیفیت داده ها و آمارهای رسمی کار کنیم و از شتاب در ارایه نتایج بپرهیزیم./ارادتمند. آشفته

📎
https://app.powerbi.com/view?r=eyJrIjoiNWYzZDI5MTQtODFlZC00NzhmLWI5OWMtNTE3MTJmMzQxYzUyIiwidCI6ImU0YmQ2OWZmLWU2ZjctNGMyZS1iMjQ3LTQxYjU0YmEyNDkwZSIsImMiOjh9

🆔@IASE_ISLP

مقاله بررسی کیفیت داده های رسمی کرونا ویروس امروز برای چاپ در مجله ای در هلند پذیرش شد. سه زمینه تحقیقاتی ریسک، بازارهای مالی و اقتصاد را در اروپا و آمریکای جنوبی پیگیری می کنیم ولی قبل از بررسی کیفیت داده ها صلاح ندیدیم به موضوع اصلی ورود کنیم. کیفیت داده و خطای اندازه گیری پاشنه آشیل هر طرح تحقیقاتی و مطالعاتی است و در اولویت است


https://app.powerbi.com/view?r=eyJrIjoiNWYzZDI5MTQtODFlZC00NzhmLWI5OWMtNTE3MTJmMzQxYzUyIiwidCI6ImU0YmQ2OWZmLWU2ZjctNGMyZS1iMjQ3LTQxYjU0YmEyNDkwZSIsImMiOjh9


این داشبورد نیز از نتایج مقاله در دست چاپ بهره مند است. پس از چاپ مقاله، مجموعه داده های آن را جهت استفاده محققین منتشر خواهم کرد/آشفته

🆔@IASE_ISLP

#هوش_تجاری #متن_کاوی #مقاله #کیفیت_داده

مدل پیش بینی داشبورد کوید۱۹ به درستی تغییر روند را نشان داد در حالی که همه تحلیل ها اصرار بر ادامه کاهش داشتند.
آمار و مدل سازی کاری پیچیده و جذاب است.
https://app.powerbi.com/view?r=eyJrIjoiNWYzZDI5MTQtODFlZC00NzhmLWI5OWMtNTE3MTJmMzQxYzUyIiwidCI6ImU0YmQ2OWZmLWU2ZjctNGMyZS1iMjQ3LTQxYjU0YmEyNDkwZSIsImMiOjh9

می توان با آدرس زیر به کانال سواد داده و آمار پیوست./آشفته
🆔 @IASE_ISLP