Как научить LLM понимать видео? Часть вторая

В прошлой статье мы говорили про эволюцию подходов к обучению мультимодальных больших языковых моделей для решения задачи понимания видео. Сегодня узнаем, как LLM учат понимать видео и поддерживать диалог по ним на русском языке, и как оценивать этот навык, чтобы сравнивать разные модели между собой.

«Всего пару дней назад, 26 октября 2024 года, мы отметили 2 года с момента первого релиза опенсорс-версии веб-сервера Angie. Кажется, что именно сейчас наиболее уместно поговорить с вами о том, почему идея заработать на опенсорсе в России оказалась так себе. И почему мы, тем не менее, от развития опенсорс-версии Angie не отказались. И не откажемся»

Два года Angie

На сколько денег может рассчитывать ИТ-предприниматель в разных ветках развития?

1 миллион рублей в месяц — на руководстве проектом или на должности лида в условном Сбере или Яндексе. Там же вас и похоронят вместе со специализацией, но до пенсии работать будет очень комфортно.

2-4 миллиона — если заняться малым бизнесом по известной модели. Шаурма, недвижка, что-то ещё традиционное, в чём вы разбираетесь. Нужны софт-скилы, чтобы договариваться с администрацией, и несколько лет на развитие. Есть риски, но они обычно связаны с некомпетентностью или непониманием рынка.

Если хочется прыгнуть выше, то начинаются уже ИТ-стартапы, венчур. Там можно заработать примерно столько же, сколько в корпорации, но только в среднем. Лотерейное распределение — сотые доли процента стать единорогом, полпроцента — вырастить средний бизнес, 3-10 % — вырастить малый. Остальное — вы просто потеряете время и деньги.

Как мы задумали небольшую выставку, а в итоге открыли два неизвестных советских компьютера. Часть вторая

Это продолжение рассказа о выставке, посвящённой 100-летию конструктора вычислительной техники М.А. Карцева и 40-летию компьютера «Агат».

В предыдущей статье мы говорили о том, какие материалы по «Агатам» удалось найти в архиве НИИВК. Хотя и те события от нас отделяет более 40 лет, по меркам истории это буквально вчера. Сегодня же мы заглянем в более далёкие времена, когда ЭВМ не то что не называли компьютерами — когда сама идея того, что электронная вычислительная машина может существовать, вызывала скепсис.

Сгенерированный ИИ код сделает вас плохим программистом

Под использованием сгенерированного ИИ кода подразумевается ситуация, когда ИИ пишет код за вас, а не когда вы используете ИИ как инструмент обучения, чтобы лучше познать тонкости языков программирования и библиотек. Но если вы когда-нибудь применяли эти инструменты для того, чтобы ИИ писал код на основании имён методов или комментариев с нечётко описанной функциональностью, или вы используете ИИ для изучения и понимания собственной кодовой базы, чтобы не делать этого самостоятельно, то эта статья — для вас.

Пол Лайнбарджер: научная фантастика и психологическая война

Несколько лет назад на Хабре поднималась тема приёмов психологической войны. Там же приводились примеры военной пропаганды времён Второй мировой.

В обсуждении мельком упомянули легендарного Пола Лайнбарджера, который заложил фундаментальную теоретическую основу для этой дисциплины. Работы американского специалиста внимательно изучались в СССР. Эти методы применяются на практике до сих пор — как по прямому назначению в военных конфликтах, так и в бизнесе: пиар, маркетинг, реклама, массовые коммуникации. В 2013 и 2023 годах американскую классику переиздавали в РФ, причём у книги высокий рейтинг 8,62 и отзывы читателей. Тема опять стала актуальной.

Сам Лайнбарджер — весьма неординарная личность. Любопытно, что параллельно с основной работой в Минобороны США он приобрёл известность как автор научно-фантастических произведений, и очень интересных.

«Ошибку я нашёл в проекте DPDK. В нём есть и другие ошибки, но про них потом. Они меркнут перед этим алмазом. Только не ждите чего-то эдакого. Ошибка проста до безобразия. Вот только найти её, просматривая код, ой как непросто»

Самая красивая ошибка, найденная в 2024 году с помощью PVS-Studio

Офис Intel в Израиле отменил бесплатный кофе

Сотрудников Intel, прибывших в израильские офисы утром, ждал неприятный сюрприз: кухонные уголки, обычно хорошо заполненные кофе, чаем и фруктами (стандартная практика в офисах хайтех-компаний) были пустые. Всё, что было, это табличка на стойке, гласящая: «Обновление по поводу сервиса напитков и фруктов. Бесплатный чай, кофе и фрукты отменяются с 27.10.2024». Это изменение вступило в силу после окончания праздников в Израиле.

Режиссёр НАСА обещает представить доказательства существования инопланетной жизни в следующем месяце

Саймон Холланд, работавший над документальными фильмами для BBC и проектами, финансируемыми НАСА, заявил, что программа по поиску внеземных сигналов, разработанная при поддержке Оксфорда, без лишнего шума обнаружила «нечеловеческий разум в нашей галактике».

Сигнал — пятичасовой всплеск радиоволн — исходил из области вокруг Проксимы Центавра, звезды, находящейся на расстоянии около 4,2 световых лет от Земли.

Команда из Оксфорда подтвердила, что анализирует сигнал, но не раскрыла его вероятный источник

«За пять лет мы прошли жизненный цикл от идеи до коммерциализации с запуском серии. И цикл этот с ощутимыми дополнениями, состоящими из групповой работы заинтересованных организаций над определением экзоскелетов в качестве формализованного вида продукции»

Экзоскелет «Норникеля». Ну, что там? Посмотрим

«Не ошибусь, если предположу, что многие из нас занимались апгрейдом своего компьютера: увеличивали память, заменяли видеокарту, а то и весь компьютер. Обычно всё сводится к тому, что покупается новая плата, устанавливается в соответствующее гнездо, либо же производится её замена на более современную вариацию.

По большому счёту, с такой перестановкой железа способна справится даже рядовая домохозяйка. Но в стародавние времена, чтобы выполнить модернизацию своего электрического помощника по последнему слову техники и с минимальными финансовыми затратами, иногда надо было обладать навыками электромонтажника.

И вот, наконец-то мне представилась возможность сделать технический апгрейд своего старинного компьютера и реализовать очередную свою детскую мечту!»

Апгрейд компьютера паяльником

Что такое 50% CPU?

Если у вас на машине стрелочка показывает, что у вас осталась половина бака, то у вас точно осталась половина бака? На самом деле больше, так как современные машины врут и топлива ещё немного есть, даже когда стрелка на нуле — забота об альтернативно одарённых водителях. А если сервер показывает 50% cpu, то сколько ресурсов у нас осталось?

Для многих ответ ясен, и это не 50%. Поэтому извините, если многие вещи будут вам очевидны. А вот для менеджеров, например, которые планируют ресурсы, это может быть открытием.