Плоти Налоги!

Пишет мне рекрутер. Сколько хотите зарабатывать?

Я: 350к на руки!

HR: ок, а сколько в гросс?

Я: Ну сами посчитайте, я не знаю.

HR: Але, дядя, включи мозг, ЦКАТИНА! Прогрессивная шкала налогов

Я: Ой, я забыл, у меня лапки, мне надо посчитать.

НДС, утильсбор, прогрессивная шкала налогов. Тех людей, у которых не было денег это коснется косвенно. Как говорится, продукты марки «каждый день» как покупали, так и покупают. А вот если вы уже богач, то скоро опять станете бедным. Недолго песенка играла. Это все мои эмоции.

Для тех, кто до сих пор не понимает, о чем речь. У нас теперь прогрессивная шкала налогов. Чем больше зарабатываешь, тем больший процент налогов платишь государству. Вот источник

Пока что я впервые встретился с таким вопросом по налогам. HR мне объяснил, что надо глянуть в НДФЛ и посмотреть процент налога. И от него уже считать ГРОСС (Гросс — значит до вычета налогов). Безусловно, для вас ничего не поменяется. Налог платит за вас работодатель, поэтому ему надо знать сколько вы уже заработали за этот год.

Как сказано на сайте ФНС, налог сверху накидывается постепенно, а не сразу. Т.е. если у вас зарплата 500к, но вы в этом году еще нифига не работали, то для вас будет считаться пока 13 процентов. И как только вы перепрыгните 2.5млн дохода, тогда и будет повышение.

Кстати, если у вас параллельно открыто ИП или СЗ, то доход с них не распространяется на трудовой доход по ТК РФ. Поэтому выдохните. Хотя бы тут ок.

И сколько компаниям теперь за нас платить?

Ставка 15% — для части годового дохода выше 2,4 млн руб. и до 5 млн руб. включительно (в среднем выше 200 тыс. руб. и до 416,7 тыс. руб. включительно в месяц).

Ставка 18% — для части годового дохода выше 5 млн руб. и до 20 млн руб. включительно (в среднем выше 416,7 тыс. руб. и до 1,670 тыс. руб. включительно в месяц).

Ставка 20% — для части годового дохода выше 20 млн руб. и до 50 млн руб. включительно (в среднем выше 1,670 тыс. руб. и до 4,170 тыс. руб. включительно в месяц).

Ставка 22% — для части дохода выше 50 млн руб. в год, или выше 4,170 тыс. руб. в месяц.

У кого есть какие мысли на этот счет?

XLTable - OLAP Cервер для нового стека данных
Работайте с ClickHouse, BigQuery, Snowflake из сводной таблицы Excel.

Предоставьте пользователям возможность самостоятельно работать с данными, с помощью знакомого инструмента.

📈Ключевые возможности XLTable:
• Аналог MS OLAP (SSAS) для больших данных
• Интеграция с MS Excel по протоколу XMLA
• Поддержка ClickHouse, BigQuery, Snowflake
• Скоро: YDB, Greenplum
• Множество групп мер, иерархий и измерений в одном кубе
• Гибкие настройки кэширования
• Развёртывание внутри вашей инфраструктуры или в облаке

🔒Безопасность:
• Интеграция с LDAP
• Разграничение доступа на уровне мер, измерений и их членов

⚙️Производительность:
• Безлимитное количество мер и измерений
• Работа из Excel c миллиардами строк данных
• Все расчеты производятся на уровне ClickHouse
• Отличные возможности для масштабирования

Хочешь получить бесплатную пробную версию на 30 дней?

👉🏻Напиши «OLAP» - покажем демо и поможем с настройкой

Контакт: https://t.iss.one/vorobiova_anastasia
Сайт с информацией о продукте: https://xltable.com/

Ребят, кто еще думает про то, залетать в BootCamp или нет.

Вот @roadmappers_bot

Он на кнопках. Выбираете продукт, оплачиваете и сразу попадает в чат. Доступы будут в период проведения потока. Бот вам все скажет.

Можно по СБП, можно Долями оплатить

До 5 января скидка на все потоки(январский и мартовский). 55к стоит за два месяца.

Дальше будет повышение цены после 5 января.


P.s. для тех, у кого иностранные карты, пишите мне в лс @halltape.

Мне писать объяснительную?

Бывают разные комменты на ютубе, но некоторыми хочется делиться.

Человеку непонятно, НА КАКОМ ОСНОВАНИИ на превью видео про ДАТА ИНЖЕНЕРОВ изображен АВТОМОБИЛЬ, кстати НЕМЕЦКОЙ МАРКИ!

Все, что можно поделать в этой ситуации — ЗАПРЕТИТЬ!

Вот реально, кого блин волнует это вообще. Ну захотел я так. НЕТ! ТЫ ДОЛЖЕН БЫЛ СДЕЛАТЬ УМЕРЕННУЮ ОБЛОЖКУ. НЕЛЬЗЯ ВЫДЕЛЯТЬСЯ.

коммент тут

Как ответить на собесе, если не знаешь?

На мой взгляд так: "Не приходилось работать, не было необходимости. Могу рассказать только то, что знаю об этом."

Все. Иначе если начинать выдумывать, мы себя закапываем, потому что начинается уже смешивание всего со всем. Либо вообще сказать, что минимально работали с этим инструментом или технологией и сильно не погружены в тему.

Знаете, вот приходим мы в компанию, вас там начинают гонять по тому, как выделяется память, как внутри компа фиксики бегают, как связана теория струн с перебалансировкой Кафки. А потом нам дают задачу кубики перекладывать. Я образно, безусловно. Ну не всегда вопросы с собесов совпадают с реальными задачами. Зачем спрашивать про индексы в постгресе, если в команде их никто не использует и может быть даже постгреса нет))

Или зачем давать задачи по алгосам, если сто процентов все разрабы будут писать код через Cursor, Codex или Copilot — ВОТ РАНЬШЕ БЫЛО ЛУЧШЕ! ПИСАЛИ САМИ РУКАМИ! Хотя стоп, если вы забыли, то профессор Савельев (он там за мозг шарит) вообще в одном из интервью сказал, что ПИТОН — это вообще не язык программирования...Вот ассемблер да.

Если что, я могу в комменты скинуть этот видос, я не придумываю. Каждые 5 лет люди стареют и не желают принимать новые технологии и еще свой возраст. Ой, это вообще вечная тема...

Мне нравится, когда на собесах происходит так:
- Привет, сейчас мы расскажем о наших задачах и архитектуре, а ты постарайся потом о себе поведать так, чтобы это максимально пересекалось с нашим стеком.

Все. Никаких теорем, определений и так далее. Услышал, что у них Greenplum, сразу перестраивай свой рассказ под него. Можно сказать о том, какие задачи были с ним и сразу показать глубину знаний. Причем необязательно шарить за него прям до исходного кода. Команде может достаточно понимать за партиции, настройки дистрибуции, да и внешние таблицы. В целом может им это уже ок. Не всем же нужен ОЛИМПИАДНИК!

По поводу Кафки.
- Скажите, пожалуйста, как перебалансировать Кафку
- Про балансировку не подскажу, не сталкивался, не было такой необходимости
- Ну все же, вот у вас есть несколько партиций в Кафке
- Послушайте, я же сказал, что не сталкивался, поэтому не смогу ответить

Я принципиально отказываюсь даже разгонять логически, потому что это тупо додумывание. Причем совершенно точно не в ту сторону. И мне потом собеседующий поставит не один минус, а 5 минусов. Очевидно, если не шаришь, то намешаешь вообще все понятия и термины.

Поэтому я стал просто отказывать от вопросов, если не знаю. И честно об этом говорю. А если знаю только какие-то основы, то могу предложить просто рассказать все, с чем сталкивался с этим инструментом.

Я думаю, что эта проблема с тем, чтобы ответить на все вопросы идет из универа, где на экзамене ты хочешь безупречно ответить на все вопросы. Но на мой взгляд на собесах лучше придерживаться тактики сдерживания. А то скажешь лишнее слово и тебе накинут еще 100 вопросов по этой ерунде, которую ты случайно выкинул.

Вот знаете, я несколько раз смотрел видосы по индексам, по кластеризованным индексам, как работает внутри все это и благополучно уже все забыл. А ПОЧЕМУ? Потому что я так ни разу и не столкнулся с ними в задачах. И вот я буду сейчас выдумывать, что такое GIST индекс или как работает некластеризванный индекс. Да я не помню уже че это такое. Ну есть и есть.

Инфа, которую мы не используем явно стирается, как ненужная. А видос про то, что питон это ерунда, а не программирование, сейчас скину)

Титаник не умеет читать Iceberg

Ничего не понятно, но очень интересно.

Что имеем?
Есть PowerBI. Да, это программа для дашбордов. Там можно смотреть метрики, строить графики. PowerBI подключается к вашей БД —> дальше к табличке —> SQL запрос —> график! И также есть S3 (тут храним данные).

Данные у нас грузятся каждый день за 7 дней назад (Каждый день грузим неделю). Почему? Потому, что они могут долетать обновленные + иногда нужно сделать ручной запуск РЕТРО (прогрузить конкретный диапазон дат из прошлого)

Что требуется?
PowerBI должен обращаться к этим данным и строить по ним дашборд.

Как будем решать?
Во-первых мы БИГДАТА, значит мы наверняка данные партицируем (разбиваем по папкам по бизнес дате). Да, это круто. Потом можно удалять конкретные партиции-папки в момент, когда грузим 7 дней назад. Нам же надо обновлять данные за прошлый период. Но PowerBI по какой-то причине не может читать в S3 партиции. Ну вот не получается и все! Только если все лежит в одной ПАПКЕ (Душнилы: это не папки, а объекты..так нельзя говорить...СТАЛИНА НА ВАС НЕТ)

Ну ок, тогда не будем партицировать. Складываем все в одну папку. Но как мы будем обновлять наши данные, мы же получается просто APPEND в одно место и оно начинает дублироваться!

Давайте применим Delta таблицы! Это типа штука, которая позволяется удалять данные в S3. Типа пишешь DELETE и оно прям удаляет. Но у меня не получается, потому что версия Spark Scala и Delta не подходят друг к другу. Короче спарк я обновить сам не могу, а версию Delta мне тоже подходящую не найти.

Давайте применим Iceberg! У меня получилось сделать DELETE! Все четко удалилось из .parquet. Напомню, что из файла формата parquet как бы удалить нельзя ничего. Его можно либо дропнуть полностью и перезаписать, либо дозаписать рядом. А Iceberg — это типа надстройка, которая позволяет DELETE, UPDATE, MERGE + еще можно ходить по разным версиям таблиц, типа как в прошлое!

Вроде все круто! Но теперь PowerBI не умеет читать Iceberg. Короче у нас нет этого коннектора.

Че теперь делать?

⚠️ Делаем 3 таблицы:
source_table - это инкремент (например 7 дней или ретро. Каждый раз overwrite)
tmp_table - это временная таблица (в нее будут стекать финальные данные)
target_table - это таблица витрина, с которой читает PowerBI

Прилетел инкремент в source_table, дальше узнаем в нем min и max бизнес дат. Потому читаем target_table и фильтруем из него все данные, кроме найденных min и max. Дальше делаем source_table.union(filtered_target_table) и записываем в tmp_table.

Последний шаг. Удаляем target_table и переименовываем tmp_table в target_table.

В чем плохо?
Каждый раз мы будем тянуть все больше и больше данных, перетаскивая их из одной таблицы в другую + сама табличка растет и не партицированая. Но пока решение такое и в целом рабочее.

Че думаете?

Какой график работы рассматриваете?

Конечно же ОФИС!

Боже, храни удаленку