Озеро для дата-склада: как в «Лаборатория Касперского» нырнули в новые методы хранения данных и что из этого вышло
Гибкие методологии построения хранилищ данных — очень популярный тренд. Причина — возрастающая сложность корпоративных моделей данных и необходимость интеграции большого числа разнородных источников, которые включают в себя не только традиционные СУБД и плоские файлы, но и различные real-time-брокеры сообщений, внешние API и базы данных NoSQL.
Михаил Килинский из «Лаборатории Касперского» рассказывает, как в компании изначально хранили данные, почему решили внедрить методологии Data Lake и Data Vault и к чему это привело.
Гибкие методологии построения хранилищ данных — очень популярный тренд. Причина — возрастающая сложность корпоративных моделей данных и необходимость интеграции большого числа разнородных источников, которые включают в себя не только традиционные СУБД и плоские файлы, но и различные real-time-брокеры сообщений, внешние API и базы данных NoSQL.
Михаил Килинский из «Лаборатории Касперского» рассказывает, как в компании изначально хранили данные, почему решили внедрить методологии Data Lake и Data Vault и к чему это привело.
👍25🔥5❤4💩2🤓2🤣1
Необычные проекты на базе «малинки»: что можно сделать своими руками
Raspberry Pi — это настоящий клад для тех, кто любит мастерить и экспериментировать. С его помощью можно собрать всё что угодно: умный дом, игровую приставку, робота или даже собственную метеостанцию. Посмотрим на самые крутые «малиновые» DIY-проекты, которые можно повторить.
Raspberry Pi — это настоящий клад для тех, кто любит мастерить и экспериментировать. С его помощью можно собрать всё что угодно: умный дом, игровую приставку, робота или даже собственную метеостанцию. Посмотрим на самые крутые «малиновые» DIY-проекты, которые можно повторить.
❤24👍15💩10🔥3😁3
Разработчик из Сан-Франциско сообщил в LinkedIn про свои высокие расходы при годовом доходе $340 тыс. (около 33,6 млн рублей).
Он выразил недовольство тем, что после уплаты налогов у него остаётся только $220 тыс. (около 21,8 млн рублей) на всё. За год он выплачивает $120 тыс. (около 11,8 млн рублей) в качестве налогов. При этом его ежемесячные расходы составляют около $20 тыс. (около 1,9 млн рублей).
В течение каждого месяца разработчик тратит $9,5 тыс. на аренду квартиры, $1,3 тыс. на лизинг Tesla Cybertruck, $1,6 тыс. на еду и салаты из службы доставки, $200 на услуги прачечной, $2,3 тыс. на свидания, $2,6 тыс. на занятия лыжным спортом, $20 на покупку новой рубашки и $1,8 тыс. на развлечения.
По его словам, работая 30 часов в неделю в удалённом режиме, он сталкивается с ежемесячным дефицитом в $1000 из-за высоких налогов. Он не понимает, как можно выжить в Сан-Франциско при зарплате в размере $340 тыс. в год или около $28,3 тыс. в месяц, из которых почти треть уходит на налоги.
#считаемчужиеденьги
Он выразил недовольство тем, что после уплаты налогов у него остаётся только $220 тыс. (около 21,8 млн рублей) на всё. За год он выплачивает $120 тыс. (около 11,8 млн рублей) в качестве налогов. При этом его ежемесячные расходы составляют около $20 тыс. (около 1,9 млн рублей).
В течение каждого месяца разработчик тратит $9,5 тыс. на аренду квартиры, $1,3 тыс. на лизинг Tesla Cybertruck, $1,6 тыс. на еду и салаты из службы доставки, $200 на услуги прачечной, $2,3 тыс. на свидания, $2,6 тыс. на занятия лыжным спортом, $20 на покупку новой рубашки и $1,8 тыс. на развлечения.
По его словам, работая 30 часов в неделю в удалённом режиме, он сталкивается с ежемесячным дефицитом в $1000 из-за высоких налогов. Он не понимает, как можно выжить в Сан-Франциско при зарплате в размере $340 тыс. в год или около $28,3 тыс. в месяц, из которых почти треть уходит на налоги.
#считаемчужиеденьги
😁184🤣110🤡62🥴27👍19😭10❤8🤮6😢2🤬1🤗1
This media is not supported in your browser
VIEW IN TELEGRAM
3D-графика на форме в Lazarus IDE
При разработке приложения иногда возникает необходимость в создании трёхмерной визуализации. Например, это может быть отрисовка трёхмерной поверхности с наложенной текстурой или отображение трёхмерной модели детали или сборочной единицы проектируемого изделия. Помимо визуализации, пользователю следует предоставить функционал для интерактивного взаимодействия с моделью — возможность вращать, приближать и перемещать её в области просмотра.
С этой задачей в Lazarus IDE может справиться компонент трёхмерного игрового движка Castle Game Engine — это кроссплатформенный игровой движок с открытым исходным кодом для 3D- и 2D-игр cо своим визуальным редактором и поддержкой Pascal API. Сам движок поддерживает множество форматов файлов моделей, таких как glTF, X3D, WRL и Spine, и может работать на различных платформах.
При разработке приложения иногда возникает необходимость в создании трёхмерной визуализации. Например, это может быть отрисовка трёхмерной поверхности с наложенной текстурой или отображение трёхмерной модели детали или сборочной единицы проектируемого изделия. Помимо визуализации, пользователю следует предоставить функционал для интерактивного взаимодействия с моделью — возможность вращать, приближать и перемещать её в области просмотра.
С этой задачей в Lazarus IDE может справиться компонент трёхмерного игрового движка Castle Game Engine — это кроссплатформенный игровой движок с открытым исходным кодом для 3D- и 2D-игр cо своим визуальным редактором и поддержкой Pascal API. Сам движок поддерживает множество форматов файлов моделей, таких как glTF, X3D, WRL и Spine, и может работать на различных платформах.
🔥17👍11❤6🥱4🤮3
У вас есть любимый HR, которого хочется порадовать и сказать что-то хорошее? Наверняка есть! Оставьте ему своё пламенное послание (можно анонимно), а мы сделаем из этого валентинку и доставим адресату.
Please open Telegram to view this post
VIEW IN TELEGRAM
🤮45🥴34🥰3🤬3🤣3
Порталы: как устроен расчёт видимости в Quake
В процессе разработки Quake возникла проблема перерисовки, то есть многократной записи одного и того же пикселя во время рендеринга кадра. Видимым остаётся лишь последний цвет, а все предыдущие записи оказываются лишней тратой ресурсов. Это плохо, если в вашей игре используется программный рендеринг, и так выжимающий последние соки из компьютера середины 90-х годов.
Как снизить объём перерисовки? Давайте начнём с высокоуровневого обзора возможных решений.
В процессе разработки Quake возникла проблема перерисовки, то есть многократной записи одного и того же пикселя во время рендеринга кадра. Видимым остаётся лишь последний цвет, а все предыдущие записи оказываются лишней тратой ресурсов. Это плохо, если в вашей игре используется программный рендеринг, и так выжимающий последние соки из компьютера середины 90-х годов.
Как снизить объём перерисовки? Давайте начнём с высокоуровневого обзора возможных решений.
👍41
Сто лет собеседований: почему наём в IT так переусложнён
Наём — это решение задачи с двумя неизвестными. Работодатель оценивает кандидата по его резюме, портфолио, тестовому заданию и общению на собеседованиях, но всё равно не может быть до конца уверен в том, что нашёл подходящего сотрудника. Кандидат выбирает работодателя по HR-бренду, описанию вакансии, может запросить в LinkedIn отзыв у сотрудника компании, но на 100% понимает, подходит ли ему рабочее место, только спустя пару месяцев после трудоустройства.
В результате ситуация дискомфортна для обеих сторон: компании тратят много сил и времени на поиск квалифицированных кадров, ошибки найма стоят дорого, а специалисты страдают от переусложнённого отбора.
Рассмотрим, как выглядит наём глазами обеих сторон, и попытаемся понять, может ли ситуация измениться в будущем
Наём — это решение задачи с двумя неизвестными. Работодатель оценивает кандидата по его резюме, портфолио, тестовому заданию и общению на собеседованиях, но всё равно не может быть до конца уверен в том, что нашёл подходящего сотрудника. Кандидат выбирает работодателя по HR-бренду, описанию вакансии, может запросить в LinkedIn отзыв у сотрудника компании, но на 100% понимает, подходит ли ему рабочее место, только спустя пару месяцев после трудоустройства.
В результате ситуация дискомфортна для обеих сторон: компании тратят много сил и времени на поиск квалифицированных кадров, ошибки найма стоят дорого, а специалисты страдают от переусложнённого отбора.
Рассмотрим, как выглядит наём глазами обеих сторон, и попытаемся понять, может ли ситуация измениться в будущем
💯45👍11
Жизнь после помойки — ремонтируем легендарный игровой смартфон Nokia N-Gage
Поговорим о диагностике некоторых аппаратных неисправностей классических телефонов Nokia, принципе работы матричной клавиатуры, ремонте телефона на практике с подробными изображениями и посмотрим, во что можно было на таком поиграть.
Поговорим о диагностике некоторых аппаратных неисправностей классических телефонов Nokia, принципе работы матричной клавиатуры, ремонте телефона на практике с подробными изображениями и посмотрим, во что можно было на таком поиграть.
👍73❤🔥8😁4🔥3🥰3🤡1
Agile умер. Из-за своего сострадания к product- и project-менеджерам
Agile — бог управления проектами последних лет. И неужели он умер? Или многочисленные прожект- и продакт-менеджеры убили его? Разбираемся, почему прозрачность Agile зачастую приводит к хаосу и анархии, а не гибкости и высокой ценности продукта.
Agile — бог управления проектами последних лет. И неужели он умер? Или многочисленные прожект- и продакт-менеджеры убили его? Разбираемся, почему прозрачность Agile зачастую приводит к хаосу и анархии, а не гибкости и высокой ценности продукта.
🤡80👍32🤮9❤4🔥2🥰1🙏1
Чапаев и Матрица: почему культура 90-х бунтовала против пластмассового мира
90-е годы были странным временем в мировой культуре. Одно за другим появлялись и становились коммерческими хитами произведения, постулировавшие иллюзорность нашего обыденного восприятия мира и куда более мрачное его устройство, скрытое от глаз обывателя. Тайные организации, всемогущие спецслужбы, прикидывающиеся людьми существа иного рода и их заговоры в разных сочетаниях стали одними из самых популярных тем. Под сомнения ставилась даже реальность реальности как таковой, а целью многих протагонистов стал выход за пределы иллюзорного в истинную реальность. Разбираемся, почему в девяностые мир стал казаться не совсем настоящим, причём в очень разных обществах — и на благополучном тогда Западе, и на оглушённом крахом СССР постсоветском пространстве, и в угодившей в кризис Японии.
90-е годы были странным временем в мировой культуре. Одно за другим появлялись и становились коммерческими хитами произведения, постулировавшие иллюзорность нашего обыденного восприятия мира и куда более мрачное его устройство, скрытое от глаз обывателя. Тайные организации, всемогущие спецслужбы, прикидывающиеся людьми существа иного рода и их заговоры в разных сочетаниях стали одними из самых популярных тем. Под сомнения ставилась даже реальность реальности как таковой, а целью многих протагонистов стал выход за пределы иллюзорного в истинную реальность. Разбираемся, почему в девяностые мир стал казаться не совсем настоящим, причём в очень разных обществах — и на благополучном тогда Западе, и на оглушённом крахом СССР постсоветском пространстве, и в угодившей в кризис Японии.
👍41🤮4❤3❤🔥2😁1🥱1
Классика научной фантастики: хронология
Опубликованный автором хронологический справочник содержит более четырёхсот литературных произведений научной фантастики, которые относят к классике жанра. Хронология охватывает период со 160 года до 1 января 2025 года.
Опубликованный автором хронологический справочник содержит более четырёхсот литературных произведений научной фантастики, которые относят к классике жанра. Хронология охватывает период со 160 года до 1 января 2025 года.
👍72🔥20❤🔥11👎3😁3🤮3🤝3🫡2🤔1
Как далеко мы можем заглянуть в космос?
Галактика JADEs-GS-z14-0 кажется совершенно непримечательной, но тем не менее, она побила рекорд космических расстояний и наблюдений. Это первая галактика среди найденных галактик, существовавших уже в первые 300 миллионов лет жизни Вселенной, а это всего 2,1% от её нынешнего возраста. Со своей точки обзора в расширяющейся Вселенной эта галактика могла бы увидеть наш прото-Млечный Путь таким, каким он был примерно 13,52 миллиарда лет назад — когда нам было всего 2,1% от нашего нынешнего возраста.
Галактика JADEs-GS-z14-0 кажется совершенно непримечательной, но тем не менее, она побила рекорд космических расстояний и наблюдений. Это первая галактика среди найденных галактик, существовавших уже в первые 300 миллионов лет жизни Вселенной, а это всего 2,1% от её нынешнего возраста. Со своей точки обзора в расширяющейся Вселенной эта галактика могла бы увидеть наш прото-Млечный Путь таким, каким он был примерно 13,52 миллиарда лет назад — когда нам было всего 2,1% от нашего нынешнего возраста.
DeepSeek — очередной квантовый скачок в развитии AI
Пока скептики в области ИИ продолжают размышлять о том, что ИИ никогда не обретёт сознание и останется лишь имитатором Интернета, небольшая китайская компания совершила прорыв. Они создали думающую модель всего за $6 млн. Всё это произошло, пока американские гиганты вроде Google ковыряли в носу и тратили миллиарды.
Эта модель настолько хороша, что вероятно, превзойдёт в способности размышлять многих читателей этой статьи
Пока скептики в области ИИ продолжают размышлять о том, что ИИ никогда не обретёт сознание и останется лишь имитатором Интернета, небольшая китайская компания совершила прорыв. Они создали думающую модель всего за $6 млн. Всё это произошло, пока американские гиганты вроде Google ковыряли в носу и тратили миллиарды.
Эта модель настолько хороша, что вероятно, превзойдёт в способности размышлять многих читателей этой статьи
🔥103😁43👎19👍18💩13🤮11🤡9
🛠 Intel предложила модульные стандарты для ноутбуков и мини-ПК, которые повысят их ремонтопригодность (ФОТО)
#новости
Please open Telegram to view this post
VIEW IN TELEGRAM
👍24🔥9
«Сегодня я расскажу о проекте, который разрабатываю некоторое время. Это эмулятор NES. Создаю его в виде библиотеки, чтобы можно было добавить его в свою сборку эмулятора, игры или залить в микроконтроллер»
Эмулятор NES в каждый проект! [0x00]
Эмулятор NES в каждый проект! [0x00]
❤29👍18🤩2👌2
This media is not supported in your browser
VIEW IN TELEGRAM
Разработчик Патрик Гиллеспи представил миниатюрную версию классической игры «Змейка». Этот вариант использует вместо привычной графики отдельные субпиксели LCD-дисплея.
«Змейка» воспроизводится в веб-браузере и работает по тем же правилам, что и стандартная версия. Пользователь управляет игрой, которая поглощает объекты и становится всё длиннее. Однако в случае с новой версией на экране отображается движение объекта только на уровне субпикселей, каждый из которых состоит из трёх частей — красного, зелёного и синего.
Именно эти субпиксели, которые работают вместе, формируют цвета на экране. Гиллеспи удалось сделать так, чтобы игра задействовала только один из них. Это потребовало значительной доработки программного кода.
Сложности возникли с точностью отображения, так как при активации зелёного субпикселя свет от подсветки монитора частично освещал соседний красный субпиксель, и возникли визуальные артефакты. Разработчик решил эту проблему, перейдя на нестандартное цветовое пространство, отличающееся от формата sRGB.
В итоге получилась почти невидимая игра. Разработчик отмечает, что его проект продемонстрировал возможности управления пикселями через код. По его словам, в будущем это может повлиять на развитие технологии в области отображения данных на мониторах.
Проект доступен на GitHub.
«Змейка» воспроизводится в веб-браузере и работает по тем же правилам, что и стандартная версия. Пользователь управляет игрой, которая поглощает объекты и становится всё длиннее. Однако в случае с новой версией на экране отображается движение объекта только на уровне субпикселей, каждый из которых состоит из трёх частей — красного, зелёного и синего.
Именно эти субпиксели, которые работают вместе, формируют цвета на экране. Гиллеспи удалось сделать так, чтобы игра задействовала только один из них. Это потребовало значительной доработки программного кода.
Сложности возникли с точностью отображения, так как при активации зелёного субпикселя свет от подсветки монитора частично освещал соседний красный субпиксель, и возникли визуальные артефакты. Разработчик решил эту проблему, перейдя на нестандартное цветовое пространство, отличающееся от формата sRGB.
В итоге получилась почти невидимая игра. Разработчик отмечает, что его проект продемонстрировал возможности управления пикселями через код. По его словам, в будущем это может повлиять на развитие технологии в области отображения данных на мониторах.
Проект доступен на GitHub.
👍57🤯21🥱6😁4🥴4
Космический лифт за 15 минут
Идея космического лифта звучит крайне фантастично, однако данная концепция всерьёз прорабатывалась и учёные продолжают исследовать эту область. Давайте же познакомимся с их наработками.
Идея космического лифта звучит крайне фантастично, однако данная концепция всерьёз прорабатывалась и учёные продолжают исследовать эту область. Давайте же познакомимся с их наработками.
👍37🤣33👎6😭3
Каждый год специалисты ставят оценки компаниям, в которых работают или работали раньше, а Хабр Карьера собирает их и составляет рейтинг лучших. Сотрудники компаний оценивают задачи, технологии, зарплату, соцпакет, карьерный рост и другие качества, на которые обращают внимание во время работы или её поиска.
Узнаем, какие компании стали лучшими IT-работодателями России в 2024 году и за какие качества их особенно ценят
Please open Telegram to view this post
VIEW IN TELEGRAM
🤮52😐22
Американская компания Nvidia, генеральный директор OpenAI Сэм Альтман и президент США Дональд Трамп прокомментировали ситуацию по поводу популярности китайского проекта DeepSeek, который стал альтернативой ChatGPT.
В Nvidia считают, что DeepSeek — это «превосходное достижение в области ИИ», которое показывает, как компания может создавать новые модели ИИ, используя метод масштабирования во время тестирования, задействуя широкодоступные модели и вычисления, которые полностью соответствуют экспортному контролю США.
«Относительно легко скопировать то, что, как вы знаете, работает. Чрезвычайно сложно сделать что‑то новое, рискованное и сложное, когда вы не знаете, сработает ли это. Отдельные исследователи по праву получают много славы за это, когда они это делают! Это самая крутая вещь в мире», — пояснил Сэм Альтман по поводу текущей ситуации на рынке ИИ.
Альтман о DeepSeek R1: «Впечатляющая модель». Теперь, когда китайский стартап привлёк к себе много внимания в сфере ИИ, что будет дальше? «Мы, очевидно, предоставим гораздо лучшие модели, и это действительно воодушевляет — иметь нового конкурента», — считает Альтман.
Президент США Дональд Трамп заявил о необходимости активизации усилий американских разработчиков в сфере искусственного интеллекта на фоне успеха чат‑бота китайской компании DeepSeek. Он подчеркнул, что появление более дешёвой и быстрой модели ИИ в Китае должно стать «тревожным сигналом» для американской отрасли. «Выпуск DeepSeek — ИИ от китайской компании, должен стать тревожным сигналом для наших отраслей, о том, что нам нужно предельно сосредоточиться на конкуренции с целью победы», — пояснил Трамп, выступая в Палате представителей Конгресса США.
По мнению президента США, американские компании смогут адаптироваться к новым условиям и даже превзойти китайских конкурентов. По его словам, китайское руководство в беседе с ним признавало высокий уровень компетенций американских учёных. Он также положительно оценил то, что модель китайской компании более быстрая и дешёвая в сравнении с аналогами.
DeepSeek (深度求索) — это китайский стартап, основанный тремя сотрудниками Чжэцзянского университета из Ханчжоу. Проект был создан в 2023 году и за короткий период смог стать достойной альтернативой ChatGPT. У проекта есть веб‑версия, официально доступная в том числе из России, в отличие от западных аналогов.
27 января 2025 года DeepSeek серьёзно повлияла весь американский рынок — минус триллион долларов капитализации за сутки. Например, капитализация Nvidia сократилась более чем на $570 млрд, следует из данных NASDAQ. Таким образом, Nvidia уступила Apple звание самой дорогой компании.
В Nvidia считают, что DeepSeek — это «превосходное достижение в области ИИ», которое показывает, как компания может создавать новые модели ИИ, используя метод масштабирования во время тестирования, задействуя широкодоступные модели и вычисления, которые полностью соответствуют экспортному контролю США.
«Относительно легко скопировать то, что, как вы знаете, работает. Чрезвычайно сложно сделать что‑то новое, рискованное и сложное, когда вы не знаете, сработает ли это. Отдельные исследователи по праву получают много славы за это, когда они это делают! Это самая крутая вещь в мире», — пояснил Сэм Альтман по поводу текущей ситуации на рынке ИИ.
Альтман о DeepSeek R1: «Впечатляющая модель». Теперь, когда китайский стартап привлёк к себе много внимания в сфере ИИ, что будет дальше? «Мы, очевидно, предоставим гораздо лучшие модели, и это действительно воодушевляет — иметь нового конкурента», — считает Альтман.
Президент США Дональд Трамп заявил о необходимости активизации усилий американских разработчиков в сфере искусственного интеллекта на фоне успеха чат‑бота китайской компании DeepSeek. Он подчеркнул, что появление более дешёвой и быстрой модели ИИ в Китае должно стать «тревожным сигналом» для американской отрасли. «Выпуск DeepSeek — ИИ от китайской компании, должен стать тревожным сигналом для наших отраслей, о том, что нам нужно предельно сосредоточиться на конкуренции с целью победы», — пояснил Трамп, выступая в Палате представителей Конгресса США.
По мнению президента США, американские компании смогут адаптироваться к новым условиям и даже превзойти китайских конкурентов. По его словам, китайское руководство в беседе с ним признавало высокий уровень компетенций американских учёных. Он также положительно оценил то, что модель китайской компании более быстрая и дешёвая в сравнении с аналогами.
DeepSeek (深度求索) — это китайский стартап, основанный тремя сотрудниками Чжэцзянского университета из Ханчжоу. Проект был создан в 2023 году и за короткий период смог стать достойной альтернативой ChatGPT. У проекта есть веб‑версия, официально доступная в том числе из России, в отличие от западных аналогов.
27 января 2025 года DeepSeek серьёзно повлияла весь американский рынок — минус триллион долларов капитализации за сутки. Например, капитализация Nvidia сократилась более чем на $570 млрд, следует из данных NASDAQ. Таким образом, Nvidia уступила Apple звание самой дорогой компании.
😁74👍59🔥15🤡10👏8❤6
Как благодаря полётам в космос, лесозаготовкам и облакам появились современные СУБД
Редко можно встретить технологии, которые существуют более пятидесяти лет в стремительно меняющейся ИТ-индустрии. Пока одни разработки быстро теряют актуальность, базы данных продолжают играть ключевую роль. По мере увеличения объёмов данных растёт и потребность в инструментах для их обработки, управления и анализа.
Первая СУБД, основанная на иерархическом подходе, была разработана ещё в 1960-х годах. В 1970-х появились реляционные системы, которые и сегодня остаются востребованными благодаря своей универсальности и эффективности.
Обсудим, каким был путь развития СУБД
Редко можно встретить технологии, которые существуют более пятидесяти лет в стремительно меняющейся ИТ-индустрии. Пока одни разработки быстро теряют актуальность, базы данных продолжают играть ключевую роль. По мере увеличения объёмов данных растёт и потребность в инструментах для их обработки, управления и анализа.
Первая СУБД, основанная на иерархическом подходе, была разработана ещё в 1960-х годах. В 1970-х появились реляционные системы, которые и сегодня остаются востребованными благодаря своей универсальности и эффективности.
Обсудим, каким был путь развития СУБД
👍23❤7👎2