Озеро для дата-склада: как в «Лаборатория Касперского» нырнули в новые методы хранения данных и что из этого вышло

Гибкие методологии построения хранилищ данных — очень популярный тренд. Причина — возрастающая сложность корпоративных моделей данных и необходимость интеграции большого числа разнородных источников, которые включают в себя не только традиционные СУБД и плоские файлы, но и различные real-time-брокеры сообщений, внешние API и базы данных NoSQL.

Михаил Килинский из «Лаборатории Касперского» рассказывает, как в компании изначально хранили данные, почему решили внедрить методологии Data Lake и Data Vault и к чему это привело.

Необычные проекты на базе «малинки»: что можно сделать своими руками

Raspberry Pi — это настоящий клад для тех, кто любит мастерить и экспериментировать. С его помощью можно собрать всё что угодно: умный дом, игровую приставку, робота или даже собственную метеостанцию. Посмотрим на самые крутые «малиновые» DIY-проекты, которые можно повторить.

Разработчик из Сан-Франциско сообщил в LinkedIn про свои высокие расходы при годовом доходе $340 тыс. (около 33,6 млн рублей).

Он выразил недовольство тем, что после уплаты налогов у него остаётся только $220 тыс. (около 21,8 млн рублей) на всё. За год он выплачивает $120 тыс. (около 11,8 млн рублей) в качестве налогов. При этом его ежемесячные расходы составляют около $20 тыс. (около 1,9 млн рублей).

В течение каждого месяца разработчик тратит $9,5 тыс. на аренду квартиры, $1,3 тыс. на лизинг Tesla Cybertruck, $1,6 тыс. на еду и салаты из службы доставки, $200 на услуги прачечной, $2,3 тыс. на свидания, $2,6 тыс. на занятия лыжным спортом, $20 на покупку новой рубашки и $1,8 тыс. на развлечения.

По его словам, работая 30 часов в неделю в удалённом режиме, он сталкивается с ежемесячным дефицитом в $1000 из-за высоких налогов. Он не понимает, как можно выжить в Сан-Франциско при зарплате в размере $340 тыс. в год или около $28,3 тыс. в месяц, из которых почти треть уходит на налоги.

#считаемчужиеденьги

3D-графика на форме в Lazarus IDE

При разработке приложения иногда возникает необходимость в создании трёхмерной визуализации. Например, это может быть отрисовка трёхмерной поверхности с наложенной текстурой или отображение трёхмерной модели детали или сборочной единицы проектируемого изделия. Помимо визуализации, пользователю следует предоставить функционал для интерактивного взаимодействия с моделью — возможность вращать, приближать и перемещать её в области просмотра.

С этой задачей в Lazarus IDE может справиться компонент трёхмерного игрового движка Castle Game Engine — это кроссплатформенный игровой движок с открытым исходным кодом для 3D- и 2D-игр cо своим визуальным редактором и поддержкой Pascal API. Сам движок поддерживает множество форматов файлов моделей, таких как glTF, X3D, WRL и Spine, и может работать на различных платформах.

Порталы: как устроен расчёт видимости в Quake

В процессе разработки Quake возникла проблема перерисовки, то есть многократной записи одного и того же пикселя во время рендеринга кадра. Видимым остаётся лишь последний цвет, а все предыдущие записи оказываются лишней тратой ресурсов. Это плохо, если в вашей игре используется программный рендеринг, и так выжимающий последние соки из компьютера середины 90-х годов.

Как снизить объём перерисовки? Давайте начнём с высокоуровневого обзора возможных решений.

Сто лет собеседований: почему наём в IT так переусложнён

Наём — это решение задачи с двумя неизвестными. Работодатель оценивает кандидата по его резюме, портфолио, тестовому заданию и общению на собеседованиях, но всё равно не может быть до конца уверен в том, что нашёл подходящего сотрудника. Кандидат выбирает работодателя по HR-бренду, описанию вакансии, может запросить в LinkedIn отзыв у сотрудника компании, но на 100% понимает, подходит ли ему рабочее место, только спустя пару месяцев после трудоустройства.

В результате ситуация дискомфортна для обеих сторон: компании тратят много сил и времени на поиск квалифицированных кадров, ошибки найма стоят дорого, а специалисты страдают от переусложнённого отбора.

Рассмотрим, как выглядит наём глазами обеих сторон, и попытаемся понять, может ли ситуация измениться в будущем

Жизнь после помойки — ремонтируем легендарный игровой смартфон Nokia N-Gage

Поговорим о диагностике некоторых аппаратных неисправностей классических телефонов Nokia, принципе работы матричной клавиатуры, ремонте телефона на практике с подробными изображениями и посмотрим, во что можно было на таком поиграть.

Agile умер. Из-за своего сострадания к product- и project-менеджерам

Agile — бог управления проектами последних лет. И неужели он умер? Или многочисленные прожект- и продакт-менеджеры убили его? Разбираемся, почему прозрачность Agile зачастую приводит к хаосу и анархии, а не гибкости и высокой ценности продукта.

Чапаев и Матрица: почему культура 90-х бунтовала против пластмассового мира

90-е годы были странным временем в мировой культуре. Одно за другим появлялись и становились коммерческими хитами произведения, постулировавшие иллюзорность нашего обыденного восприятия мира и куда более мрачное его устройство, скрытое от глаз обывателя. Тайные организации, всемогущие спецслужбы, прикидывающиеся людьми существа иного рода и их заговоры в разных сочетаниях стали одними из самых популярных тем. Под сомнения ставилась даже реальность реальности как таковой, а целью многих протагонистов стал выход за пределы иллюзорного в истинную реальность. Разбираемся, почему в девяностые мир стал казаться не совсем настоящим, причём в очень разных обществах — и на благополучном тогда Западе, и на оглушённом крахом СССР постсоветском пространстве, и в угодившей в кризис Японии.

Классика научной фантастики: хронология

Опубликованный автором хронологический справочник содержит более четырёхсот литературных произведений научной фантастики, которые относят к классике жанра. Хронология охватывает период со 160 года до 1 января 2025 года.

Как далеко мы можем заглянуть в космос?

Галактика JADEs-GS-z14-0 кажется совершенно непримечательной, но тем не менее, она побила рекорд космических расстояний и наблюдений. Это первая галактика среди найденных галактик, существовавших уже в первые 300 миллионов лет жизни Вселенной, а это всего 2,1% от её нынешнего возраста. Со своей точки обзора в расширяющейся Вселенной эта галактика могла бы увидеть наш прото-Млечный Путь таким, каким он был примерно 13,52 миллиарда лет назад — когда нам было всего 2,1% от нашего нынешнего возраста.

DeepSeek — очередной квантовый скачок в развитии AI

Пока скептики в области ИИ продолжают размышлять о том, что ИИ никогда не обретёт сознание и останется лишь имитатором Интернета, небольшая китайская компания совершила прорыв. Они создали думающую модель всего за $6 млн. Всё это произошло, пока американские гиганты вроде Google ковыряли в носу и тратили миллиарды.

Эта модель настолько хороша, что вероятно, превзойдёт в способности размышлять многих читателей этой статьи

«Сегодня я расскажу о проекте, который разрабатываю некоторое время. Это эмулятор NES. Создаю его в виде библиотеки, чтобы можно было добавить его в свою сборку эмулятора, игры или залить в микроконтроллер»

Эмулятор NES в каждый проект! [0x00]

Разработчик Патрик Гиллеспи представил миниатюрную версию классической игры «Змейка». Этот вариант использует вместо привычной графики отдельные субпиксели LCD-дисплея.

«Змейка» воспроизводится в веб-браузере и работает по тем же правилам, что и стандартная версия. Пользователь управляет игрой, которая поглощает объекты и становится всё длиннее. Однако в случае с новой версией на экране отображается движение объекта только на уровне субпикселей, каждый из которых состоит из трёх частей — красного, зелёного и синего.

Именно эти субпиксели, которые работают вместе, формируют цвета на экране. Гиллеспи удалось сделать так, чтобы игра задействовала только один из них. Это потребовало значительной доработки программного кода.

Сложности возникли с точностью отображения, так как при активации зелёного субпикселя свет от подсветки монитора частично освещал соседний красный субпиксель, и возникли визуальные артефакты. Разработчик решил эту проблему, перейдя на нестандартное цветовое пространство, отличающееся от формата sRGB.

В итоге получилась почти невидимая игра. Разработчик отмечает, что его проект продемонстрировал возможности управления пикселями через код. По его словам, в будущем это может повлиять на развитие технологии в области отображения данных на мониторах.

Проект доступен на GitHub.

Космический лифт за 15 минут

Идея космического лифта звучит крайне фантастично, однако данная концепция всерьёз прорабатывалась и учёные продолжают исследовать эту область. Давайте же познакомимся с их наработками.

Американская компания Nvidia, генеральный директор OpenAI Сэм Альтман и президент США Дональд Трамп прокомментировали ситуацию по поводу популярности китайского проекта DeepSeek, который стал альтернативой ChatGPT.

В Nvidia считают, что DeepSeek — это «превосходное достижение в области ИИ», которое показывает, как компания может создавать новые модели ИИ, используя метод масштабирования во время тестирования, задействуя широкодоступные модели и вычисления, которые полностью соответствуют экспортному контролю США.

«Относительно легко скопировать то, что, как вы знаете, работает. Чрезвычайно сложно сделать что‑то новое, рискованное и сложное, когда вы не знаете, сработает ли это. Отдельные исследователи по праву получают много славы за это, когда они это делают! Это самая крутая вещь в мире», — пояснил Сэм Альтман по поводу текущей ситуации на рынке ИИ.

Альтман о DeepSeek R1: «Впечатляющая модель». Теперь, когда китайский стартап привлёк к себе много внимания в сфере ИИ, что будет дальше? «Мы, очевидно, предоставим гораздо лучшие модели, и это действительно воодушевляет — иметь нового конкурента», — считает Альтман.

Президент США Дональд Трамп заявил о необходимости активизации усилий американских разработчиков в сфере искусственного интеллекта на фоне успеха чат‑бота китайской компании DeepSeek. Он подчеркнул, что появление более дешёвой и быстрой модели ИИ в Китае должно стать «тревожным сигналом» для американской отрасли. «Выпуск DeepSeek — ИИ от китайской компании, должен стать тревожным сигналом для наших отраслей, о том, что нам нужно предельно сосредоточиться на конкуренции с целью победы», — пояснил Трамп, выступая в Палате представителей Конгресса США.

По мнению президента США, американские компании смогут адаптироваться к новым условиям и даже превзойти китайских конкурентов. По его словам, китайское руководство в беседе с ним признавало высокий уровень компетенций американских учёных. Он также положительно оценил то, что модель китайской компании более быстрая и дешёвая в сравнении с аналогами.

DeepSeek (深度求索) — это китайский стартап, основанный тремя сотрудниками Чжэцзянского университета из Ханчжоу. Проект был создан в 2023 году и за короткий период смог стать достойной альтернативой ChatGPT. У проекта есть веб‑версия, официально доступная в том числе из России, в отличие от западных аналогов.

27 января 2025 года DeepSeek серьёзно повлияла весь американский рынок — минус триллион долларов капитализации за сутки. Например, капитализация Nvidia сократилась более чем на $570 млрд, следует из данных NASDAQ. Таким образом, Nvidia уступила Apple звание самой дорогой компании.