👉🏻Вышла новая in-memory колоночная СУБД Tarantool Column Store для транзакционно-аналитической обработки данных в реальном времени.
Tarantool Column Store — гибридная СУБД с поддержкой как колоночного, так и строчного хранения и обработки данных.
Чем она будет полезна для вашего бизнеса и как вы её можете применить?
📍 Ускорение и повышение точности антифрод-систем. Позволяет реализовать обнаружение подозрительных транзакций практически с нулевой задержкой.
📍 Повышение производительности системы выдачи кредитов. В реальном времени происходит аналитическая обработка матрицы, в которой содержится более 100 000 вариантов кредитных предложений и дополнительных услуг.
📍Формирование финансовой отчетности в едином хранилище с выполнением аналитических запросов в реальном времени. Данные хранятся в денормализованном виде в таблицах с 400+ колонками и объемом более 6 ТБ.
⭐️В итоге – экономия денег и времени
Tarantool Column Store — гибридная СУБД с поддержкой как колоночного, так и строчного хранения и обработки данных.
Чем она будет полезна для вашего бизнеса и как вы её можете применить?
📍 Ускорение и повышение точности антифрод-систем. Позволяет реализовать обнаружение подозрительных транзакций практически с нулевой задержкой.
📍 Повышение производительности системы выдачи кредитов. В реальном времени происходит аналитическая обработка матрицы, в которой содержится более 100 000 вариантов кредитных предложений и дополнительных услуг.
📍Формирование финансовой отчетности в едином хранилище с выполнением аналитических запросов в реальном времени. Данные хранятся в денормализованном виде в таблицах с 400+ колонками и объемом более 6 ТБ.
⭐️В итоге – экономия денег и времени
YTsaurus — год в опенсорсе!
Ровно год назад основная система обработки и хранения данных в Яндексе вышла в опенсорс. За это время у YTsaurus набралось более 1700 звёзд и 100 форков на GitHub, а также большое коммьюнити пользователей.
В честь праздника команда выпустила большое обновление платформы. Подробнее об этом — в блоге на сайте.
Ровно год назад основная система обработки и хранения данных в Яндексе вышла в опенсорс. За это время у YTsaurus набралось более 1700 звёзд и 100 форков на GitHub, а также большое коммьюнити пользователей.
В честь праздника команда выпустила большое обновление платформы. Подробнее об этом — в блоге на сайте.
Дом, милый дом: нюансы работы с ClickHouse. Часть 1
В этой статье DevOps-инженер компании Nixys расскажет про ClickHouse — open-source OLAP базу данных, ориентированную на колонки. Автор объяснит, чем строчные архитектуры СУБД отличаются от колоночных, через призму теоремы CAP покажет особенности ClickHouse и его преимущества. Также автор затронет тему табличных движков, среди которых уделит особое внимание семейству MergeTree.
В этой статье DevOps-инженер компании Nixys расскажет про ClickHouse — open-source OLAP базу данных, ориентированную на колонки. Автор объяснит, чем строчные архитектуры СУБД отличаются от колоночных, через призму теоремы CAP покажет особенности ClickHouse и его преимущества. Также автор затронет тему табличных движков, среди которых уделит особое внимание семейству MergeTree.
Нейросеть для генерации изображений YandexART стала доступна для тестирования внешним компаниям!
В режиме закрытого превью нейросеть уже попробовали несколько внешних компаний. Например, крупная e-com сеть тестирует YandexART для создания уникального дизайна подарочных карт. Клиенты сети смогут ввести текстовый запрос и самостоятельно выбрать собственное оформление для карты.
Теперь на облачной платформе Yandex Cloud с помощью YandexART компании смогут создавать визуалы для рекламы и социальных сетей, дизайн-макеты, иллюстрации для диджитала и книг. Нейросеть можно встроить через API в различные сервисы и веб-приложения.
В режиме закрытого превью нейросеть уже попробовали несколько внешних компаний. Например, крупная e-com сеть тестирует YandexART для создания уникального дизайна подарочных карт. Клиенты сети смогут ввести текстовый запрос и самостоятельно выбрать собственное оформление для карты.
Теперь на облачной платформе Yandex Cloud с помощью YandexART компании смогут создавать визуалы для рекламы и социальных сетей, дизайн-макеты, иллюстрации для диджитала и книг. Нейросеть можно встроить через API в различные сервисы и веб-приложения.
Хотите подтвердить свои знания и навыки по облачным технологиям?
Теперь такая возможность есть — Yandex Cloud запустил программу сертификации ИТ-специалистов. Первый официальный экзамен состоялся 11 апреля.
Базовый сертификат Yandex Cloud Certified Engineer Associate подтверждает знания и навыки в шести областях: базовые облачные технологии, хранение и обработка данных, DevOps и автоматизация, бессерверные вычисления, информационная безопасность и облачный биллинг.
Экзамен представляет собой онлайн-тест из 65 вопросов. Чтобы ответить на них, отводится 90 минут. Тестирование проводится с прокторингом — системой, которая контролирует, что экзамен сдаётся честно.
Узнать больше и зарегистрироваться на экзамен можно по ссылке
Теперь такая возможность есть — Yandex Cloud запустил программу сертификации ИТ-специалистов. Первый официальный экзамен состоялся 11 апреля.
Базовый сертификат Yandex Cloud Certified Engineer Associate подтверждает знания и навыки в шести областях: базовые облачные технологии, хранение и обработка данных, DevOps и автоматизация, бессерверные вычисления, информационная безопасность и облачный биллинг.
Экзамен представляет собой онлайн-тест из 65 вопросов. Чтобы ответить на них, отводится 90 минут. Тестирование проводится с прокторингом — системой, которая контролирует, что экзамен сдаётся честно.
Узнать больше и зарегистрироваться на экзамен можно по ссылке
🤖 Опубликуйте свою статью по AI/ML и выиграйте 1 млн рублей!
Стартовал прием заявок для публикации в научном журнале «Доклады Российской академии наук. Математика, информатика, процессы управления». Причем специальное издание выйдет в рамках престижной международной конференции по искусственному интеллекту — AI Journey.
Рецензировать и отбирать работы будут ведущие эксперты по искусственному интеллекту, поэтому это идеальная возможность презентовать себя научному сообществу. Оформить работу можно как на русском, так и на английском языке, без использования ранее опубликованных материалов.
А еще автор лучшей статьи получит денежный приз — 1 млн рублей! Поэтому упускать такую возможность проявить себя и побороться за солидное вознаграждение точно нельзя. Подавай заявку для участия на сайте до 20 августа и покажи своей потенциал!
Стартовал прием заявок для публикации в научном журнале «Доклады Российской академии наук. Математика, информатика, процессы управления». Причем специальное издание выйдет в рамках престижной международной конференции по искусственному интеллекту — AI Journey.
Рецензировать и отбирать работы будут ведущие эксперты по искусственному интеллекту, поэтому это идеальная возможность презентовать себя научному сообществу. Оформить работу можно как на русском, так и на английском языке, без использования ранее опубликованных материалов.
А еще автор лучшей статьи получит денежный приз — 1 млн рублей! Поэтому упускать такую возможность проявить себя и побороться за солидное вознаграждение точно нельзя. Подавай заявку для участия на сайте до 20 августа и покажи своей потенциал!
Это база: нюансы работы с Redis
В этом материале автор рассмотрит базовую репликацию Redis и процесс настройки этой СУБД на высокий уровень отказоустойчивости.
Базы данных
В этом материале автор рассмотрит базовую репликацию Redis и процесс настройки этой СУБД на высокий уровень отказоустойчивости.
Базы данных
Умеете кодить и хотите узнать, в каком направлении можно развивать свою карьеру?
Интенсивы с упором на практику вам в помощь!
Зачастую на таких коротких программах не просто учат востребованным скилам, но и объясняют, в каких сферах и профессиях они нужны.
Например, недавно Школа анализа данных Яндекса анонсировала SRE Week. На открытом интенсиве будут рассказывать как об эксплуатации больших информационных систем, так и о задачах SRE-специалистов: траблшутинге, SLA, capacity planning и многом другом. Это отличный шанс для разработчиков попробовать себя в новой сфере, а для студентов — построить траекторию развития в IT.
SRE Week пройдёт с 17 по 22 июня. Участие бесплатное. Доступ к лекциям дают всем зарегистрированным, однако, чтобы получить сертификат, нужно пройти отбор и успешно сдать итоговую работу.
Подайте заявку до 16 июня и слушайте лекции топовых экспертов
Интенсивы с упором на практику вам в помощь!
Зачастую на таких коротких программах не просто учат востребованным скилам, но и объясняют, в каких сферах и профессиях они нужны.
Например, недавно Школа анализа данных Яндекса анонсировала SRE Week. На открытом интенсиве будут рассказывать как об эксплуатации больших информационных систем, так и о задачах SRE-специалистов: траблшутинге, SLA, capacity planning и многом другом. Это отличный шанс для разработчиков попробовать себя в новой сфере, а для студентов — построить траекторию развития в IT.
SRE Week пройдёт с 17 по 22 июня. Участие бесплатное. Доступ к лекциям дают всем зарегистрированным, однако, чтобы получить сертификат, нужно пройти отбор и успешно сдать итоговую работу.
Подайте заявку до 16 июня и слушайте лекции топовых экспертов
Нюансы работы с Redis: репликация
DevOps-инженер компании Nixys продолжает свой обзор Redis. Эта статья — подробное руководство по базовой репликации Redis, из которого вы узнаете, как настроить эту БД на высокий уровень отказоустойчивости. В конце статьи автор поместил разбор атаки на Redis через H2Miner, из-за которой можно полностью потерять данные на инстансе Redis.
Базы данных
DevOps-инженер компании Nixys продолжает свой обзор Redis. Эта статья — подробное руководство по базовой репликации Redis, из которого вы узнаете, как настроить эту БД на высокий уровень отказоустойчивости. В конце статьи автор поместил разбор атаки на Redis через H2Miner, из-за которой можно полностью потерять данные на инстансе Redis.
Базы данных
Разработчики, отзовитесь! 🔍
В технологической компании YADRO актуальны вакансии для тех, кто пишет на Go, Python и JavaScript:
1️⃣ Senior Full-Stack Developer
2️⃣ Software engineer Go/Инженер-программист Go
3️⃣ Go Developer
Здесь у тебя будет возможность раскрыть свой потенциал с командой профессионалов, которая создаёт технологические решения мирового уровня.
А что предлагается?
– Гибридный или удалённый формат работы;
– Возможность гибкого начала и окончания рабочего дня;
– Конкурентный уровень заработной платы и премирование по результатам работы;
– Возможность горизонтального и вертикального роста;
– Обучение за счёт компании: учебный портал с курсами и лекциями от экспертов, дополнительное профессиональное обучение, изучение английского, участие в конференциях;
– Личное участие в становлении процессов и продуктов, возможность увидеть результат своей работы;
– Большое инженерное сообщество, которое постоянно развивается;
– ДМС со стоматологией с первого дня, консультации юристов, психологов, экспертов по ЗОЖ и управлению финансами;
– Программа поддержки инноваций;
– Скидки для сотрудников, дополнительные day-off;
– Комфортные офисы в Москве, Санкт-Петербурге, Нижнем Новгороде и Минске.
Скорее оставляй резюме по ссылкам!
В технологической компании YADRO актуальны вакансии для тех, кто пишет на Go, Python и JavaScript:
1️⃣ Senior Full-Stack Developer
2️⃣ Software engineer Go/Инженер-программист Go
3️⃣ Go Developer
Здесь у тебя будет возможность раскрыть свой потенциал с командой профессионалов, которая создаёт технологические решения мирового уровня.
А что предлагается?
– Гибридный или удалённый формат работы;
– Возможность гибкого начала и окончания рабочего дня;
– Конкурентный уровень заработной платы и премирование по результатам работы;
– Возможность горизонтального и вертикального роста;
– Обучение за счёт компании: учебный портал с курсами и лекциями от экспертов, дополнительное профессиональное обучение, изучение английского, участие в конференциях;
– Личное участие в становлении процессов и продуктов, возможность увидеть результат своей работы;
– Большое инженерное сообщество, которое постоянно развивается;
– ДМС со стоматологией с первого дня, консультации юристов, психологов, экспертов по ЗОЖ и управлению финансами;
– Программа поддержки инноваций;
– Скидки для сотрудников, дополнительные day-off;
– Комфортные офисы в Москве, Санкт-Петербурге, Нижнем Новгороде и Минске.
Скорее оставляй резюме по ссылкам!
This media is not supported in your browser
VIEW IN TELEGRAM
🎬 Премьера сиквела! «Миграция на PostgreSQL. Часть вторая: От теории к практике»
Долгожданное продолжение выходит на экраны! После нашумевшей первой части митапа «Миграция на PostgreSQL», где мы разобрали путь от аудита информационных систем до миграции кода, наши герои возвращаются с новыми историями. Те же знакомые лица, та же увлекательная тема, но теперь с акцентом на реальный практический опыт.
🎥 Что вас ждет во второй части
— Реальные кейсы миграции на PostgreSQL крупнейших компаний
— Опыт перехода с Oracle DB и MSSQL
— Полезные советы и проверенные лайфхаки, которые помогут избежать сложностей в процессе миграции
🔍 Главные герои
— Ярослав Киселев, эксперт практики инфраструктурных решений
— Роман Севрук, менеджер по развитию решений СУБД
— Александр Федотов, технический архитектор 1С
📅 Дата и время премьеры: 30 июля, 16:00
👉🏼Регистрируйтесь на премьеру и станьте свидетелем продолжения истории
👉🏼 Подписывайтесь @k2_tech
Долгожданное продолжение выходит на экраны! После нашумевшей первой части митапа «Миграция на PostgreSQL», где мы разобрали путь от аудита информационных систем до миграции кода, наши герои возвращаются с новыми историями. Те же знакомые лица, та же увлекательная тема, но теперь с акцентом на реальный практический опыт.
🎥 Что вас ждет во второй части
— Реальные кейсы миграции на PostgreSQL крупнейших компаний
— Опыт перехода с Oracle DB и MSSQL
— Полезные советы и проверенные лайфхаки, которые помогут избежать сложностей в процессе миграции
🔍 Главные герои
— Ярослав Киселев, эксперт практики инфраструктурных решений
— Роман Севрук, менеджер по развитию решений СУБД
— Александр Федотов, технический архитектор 1С
📅 Дата и время премьеры: 30 июля, 16:00
👉🏼Регистрируйтесь на премьеру и станьте свидетелем продолжения истории
Шифрование бэкапов в ClickHouse: виды, инструменты и настройка
Один из клиентов Nixys обнаружил, что резервные копии ClickHouse, которые он хранит в S3 провайдера CROC, не шифруются. Перед командой поставили задачу: настроить шифрование бэкапов. Из статьи вы узнаете о различных методах шифрования данных на стороне сервера в S3 — SSE-C, SSE-KMS и SSE-S3. А ещё познакомитесь с таким инструментом как clickhouse-backup.
Базы данных
Один из клиентов Nixys обнаружил, что резервные копии ClickHouse, которые он хранит в S3 провайдера CROC, не шифруются. Перед командой поставили задачу: настроить шифрование бэкапов. Из статьи вы узнаете о различных методах шифрования данных на стороне сервера в S3 — SSE-C, SSE-KMS и SSE-S3. А ещё познакомитесь с таким инструментом как clickhouse-backup.
Базы данных
PGConf.СПб 2024 – главная встреча постгресистов в Санкт-Петербурге!
1 октября в Питере пройдёт техническая конференция по PostgreSQL от российского СУБД-разработчика Postgres Professional.
Участников ждут более 20 докладов по темам:
✔️Эксплуатация СУБД. Опыт DBA
✔️Миграция на Postgres
✔️Мониторинг и настройка СУБД
✔️Отказоустойчивые и масштабируемые системы
✔️Новости от разработчиков
Среди спикеров прошлого года – эксперты Сбера, ВТБ, Ozon, SoftSwiss, Netcracker, Нетрики и др.
💥На конференции пройдёт единственная в России сертификация по PostgreSQL!
ГДЕ? Онлайн и офлайн: Гостиница "Санкт-Петербург", г. Санкт-Петербург, Пироговская набережная, д. 5/2
КОГДА? 1 октября 2024 г.
Участие в конференции для студентов и преподавателей – бесплатное.
РЕГИСТРАЦИЯ
Реклама. ООО «ППГ». ИНН 7729445882. erid: 2VtzqwySdRF
1 октября в Питере пройдёт техническая конференция по PostgreSQL от российского СУБД-разработчика Postgres Professional.
Участников ждут более 20 докладов по темам:
✔️Эксплуатация СУБД. Опыт DBA
✔️Миграция на Postgres
✔️Мониторинг и настройка СУБД
✔️Отказоустойчивые и масштабируемые системы
✔️Новости от разработчиков
Среди спикеров прошлого года – эксперты Сбера, ВТБ, Ozon, SoftSwiss, Netcracker, Нетрики и др.
💥На конференции пройдёт единственная в России сертификация по PostgreSQL!
ГДЕ? Онлайн и офлайн: Гостиница "Санкт-Петербург", г. Санкт-Петербург, Пироговская набережная, д. 5/2
КОГДА? 1 октября 2024 г.
Участие в конференции для студентов и преподавателей – бесплатное.
РЕГИСТРАЦИЯ
Реклама. ООО «ППГ». ИНН 7729445882. erid: 2VtzqwySdRF
Если вы сотрудник ИТ-компании, проходите опрос о работе в сфере ИТ по ссылке. Это займёт всего пять минут.
Всех, кто ответит на все вопросы исследования до 15 сентября, в конце анкеты ждёт сюрприз — возможность получить наушники в подарок 😎
Всех, кто ответит на все вопросы исследования до 15 сентября, в конце анкеты ждёт сюрприз — возможность получить наушники в подарок 😎
Postgresso за 2023
В этом материале автор сделал обзор на все ключевые события в мире PostgreSQL за 2023 год.
Базы данных
В этом материале автор сделал обзор на все ключевые события в мире PostgreSQL за 2023 год.
Базы данных
ОПРОС📍 Ваша должность в компании?
Anonymous Poll
3%
Собственник
15%
Руководитель
69%
Специалист
3%
Фрилансер
10%
Другое
Media is too big
VIEW IN TELEGRAM
Индексы в PostgreSQL
В этом ролике автор говорит о проблемах производительности в PostgreSQL. Вы разберете как устроены таблицы и сами базы данных, как работает дефрагментация данных, что такое и как работают индексы, какие виды существуют и для чего их используют. Без всех этих знаний невозможно полноценно заниматься оптимизацией запросов в PostgreSQL.
00:00 Вступление
01:19 Индексы в SQL
02:22 Устройство базы данных в PostgreSQL
04:35 Устройство таблиц
05:16 Страницы и строки таблиц
07:28 FSM и команда VACUUM
11:34 Проблема фрагментации данных в PostgreSQL
15:32 Оптимизация выборки записей
19:35 Обзор видов индексов
20:20 Методы сканирования
Смотреть это видео на youtube: youtu.be/lAWQNcAEiKw
В этом ролике автор говорит о проблемах производительности в PostgreSQL. Вы разберете как устроены таблицы и сами базы данных, как работает дефрагментация данных, что такое и как работают индексы, какие виды существуют и для чего их используют. Без всех этих знаний невозможно полноценно заниматься оптимизацией запросов в PostgreSQL.
00:00 Вступление
01:19 Индексы в SQL
02:22 Устройство базы данных в PostgreSQL
04:35 Устройство таблиц
05:16 Страницы и строки таблиц
07:28 FSM и команда VACUUM
11:34 Проблема фрагментации данных в PostgreSQL
15:32 Оптимизация выборки записей
19:35 Обзор видов индексов
20:20 Методы сканирования
Смотреть это видео на youtube: youtu.be/lAWQNcAEiKw
Как установить SQLite на Windows 10?
Первостепенно необходимо скачать файлы SQLite, чтобы в дальнейшем настроить их работу для использования в операционной системе Windows 10. Загружать базу данных рекомендуется с официального сайта разработчиков, это исключит вероятность заражения компьютера вирусными программами.
Базы данных
Первостепенно необходимо скачать файлы SQLite, чтобы в дальнейшем настроить их работу для использования в операционной системе Windows 10. Загружать базу данных рекомендуется с официального сайта разработчиков, это исключит вероятность заражения компьютера вирусными программами.
Базы данных
Media is too big
VIEW IN TELEGRAM
Работа с базами данных на Python
В этом видеоуроке автор разбирает процесс работы с базами данных на Python. Вы рассмотрите как создавать таблицу, как смотреть ее содержимое, как вносить, изменять и удалять данные, а также узнаете, что такое первичный ключ и типизация ячеек.
00:00 Введение
00:35 Создание файла базы данных
02:05 Создание таблицы
04:15 Запись данных в таблицу (метод execute)
06:20 Запись массива (метод executemany)
08:00 Как посмотреть содержимое БД
11:52 PRIMARY KEY
13:00 Типизация ячеек
16:25 Чтение из базы данных
21:57 Изменение значений
26:30 Удаление значений
28:20 Удаление таблицы
Смотреть это видео на youtube: youtu.be/siSRd4s7_ro
В этом видеоуроке автор разбирает процесс работы с базами данных на Python. Вы рассмотрите как создавать таблицу, как смотреть ее содержимое, как вносить, изменять и удалять данные, а также узнаете, что такое первичный ключ и типизация ячеек.
00:00 Введение
00:35 Создание файла базы данных
02:05 Создание таблицы
04:15 Запись данных в таблицу (метод execute)
06:20 Запись массива (метод executemany)
08:00 Как посмотреть содержимое БД
11:52 PRIMARY KEY
13:00 Типизация ячеек
16:25 Чтение из базы данных
21:57 Изменение значений
26:30 Удаление значений
28:20 Удаление таблицы
Смотреть это видео на youtube: youtu.be/siSRd4s7_ro