Инжиниринг Данных
23.6K subscribers
2K photos
57 videos
193 files
3.22K links
Делюсь новостями из мира аналитики и карьерными советами.

15 лет в Аналитике и Инжиниринге Данных, 10 лет в MAANG

🛠️ dataengineer.ru | 🏄‍♂️ Surfalytics.com

№5017813306

Реклама:
https://almond-rule-130.notion.site/1199f595f76a8030ba1be1e607c9a8ce
Download Telegram
Я кстати тоже искал репетитора по математике в 2015, я пытался объясниить, что я хочу учить все что нужно для Data Science, но репетитор по скайпу так меня и не понял
Возможности Power BI
Я не один в Канаде топлю за облачную аналитику
Cloud Data Warehouse in a Day - Agenda (2).pdf
91.4 KB
Практически закончили подготовку к Workshop в Ванкувере про облачное хранилище данных на Azure. Я прикрепил содержание, если интересно.

Это был нон стоп марафон последние 2 недели, пришлось с 0 изучать Azure DW, но знания AWS очень помогли, посути все тоже самое. В целом от Azure SQL DW ожидал большего, но оказалась, что тут много настроек - индексы, партиции. Это вам не Snowflake.

А еще, получили серебряный статус партнера Майкрософт по ” Платформе Данных”, это позволило добавить услуги на маркетплейс, вот пример курса для США https://azuremarketplace.microsoft.com/en-us/marketplace/consulting-services/rockyourdata.clouddw8hoursworkshopus но можно добавить все, что угодно. Посмотрим как работает.
Tableau выпустила новую верси 2019.3, много классных фич. Один из трендов - BI вендоры добавляют AI элементы в их продукты. Это можно увидеть и в Power BI, Tableau, QuickSight, да и другие. Другой важный элемент - это Data Catalog и Data Lineage. Это не новые слова, но раньше существовали отдельные решения Enterprise класса, а теперь мы может все это найти в BI решении.

Data Catalog - поможет нам иметь общий список показателей и измерений и их описание. Я знаю хороший продукт - Alation, но достаточно дорогой.

Data Lineage сможет вам показать всю трансформацию показателя сверху вниз. Такое было много лет назад у SAP BusinessObjects (BI) и SAP Data Services (ETL), я видел дело еще в 2011 но не впечатлило.

Кстати в августе в Амазоне была внутренняя конференция по аналитике и одним из трендов было - Data Catalog и Data Lineage, но для более сложный кейсов, когда у нас и озеро данных, и Spark и Redshift и ML
Попробуйте пройти тест на гражданство Канады https://www.yourlibrary.ca/citizenship/mobile/
Если у вас есть Alexa и вы хотите ее учить говорить по русски, то есть возможно запустить app для Alexa - Cleo, он будет помогать изучать язык. Так же у AWS есть сервис - Polly - переводит текст в слова, и там поддерживается 24 языка;
Попался профайл знакомого, он работает старшим аналитиком в государственной конторе. Я только увидел, что у него 135 сертификатов!!! OMG!! То есть получается ваша карьера и ваша зарплата ну никак не коррелирует с количеством сертификатов. 1-2 сертификата это хорошо, но 10 уже подозрительно, а 135, это уже странно совсем. Так же и с книгами, 1-2 написать норм, но 6 уже перебор. Но я их для пишу, чтобы потом выдавать их не за свои книги, а за книги компании.
Пока в России пилят бюджеты, в Канаде в Министерство Финансов обсуждает эффективность аналитики и инвестирует в развитие этого направления и финансирует канадские университеты, чтобы они обучали и повышали квалификацию. Вот я и вписался в University of Victoria, помогать студентам грызть гранит облачно-аналитической науки. Я еще заметил в Канаде нельзя просто взять и продать что-то, нужно выстраивать отношения с людьми, компаниями, 100% персональный подход, и только потом можно будет уже предлагать услуги.
Меня подтвердили на Enterprise Data World, San Diego, March 2020, если кто поедет дайте знать, в прошлом году я встретил руководителей из ВТБ.
7 главных угроз безопасности для решений облачной аналитики
- Crytopjacking
- Data breaches
- Denial of service
- Insider threats
- Hijacking accounts
- Insecure applications
- Inadequate training