This media is not supported in your browser
VIEW IN TELEGRAM
LongCat-Video — открытая нейросеть с 13,6 млрд параметров, которая умеет не только генерировать видео по тексту, но и создавать говорящих аватаров, анимировать фотографии, продолжать существующие ролики и синхронизировать речь с движением губ. Всё это можно запускать локально.
Возможности:
Где пригодится?
Клонируем проект:
git clone https://github.com/meituan-longcat/LongCat-Video
cd LongCat-Video
Создаем окружение:
conda create -n longcat-video python=3.10
conda activate longcat-video
Устанавливаем зависимости:
pip install -r requirements.txt
pip install -r requirements_avatar.txt
Скачиваем модели:
pip install "huggingface_hub[cli]"
huggingface-cli download meituan-longcat/LongCat-Video --local-dir ./weights/LongCat-Video
huggingface-cli download meituan-longcat/LongCat-Video-Avatar --local-dir ./weights/LongCat-Video-Avatar
huggingface-cli download meituan-longcat/LongCat-Video-Avatar-1.5 --local-dir ./weights/LongCat-Video-Avatar-1.5
Генерация видео:
torchrun run_demo_text_to_video.py
Оживление изображения:
torchrun run_demo_image_to_video.py
Создание говорящего аватара:
torchrun run_demo_avatar_single_audio_to_video.py
Несколько персонажей:
torchrun run_demo_avatar_multi_audio_to_video.py
Веб-интерфейс:
python run_streamlit.py
Один из самых интересных открытых проектов. В одном репозитории объединены генерация видео по тексту, анимация изображений, создание говорящих аватаров и продолжение существующих роликов. При этом разработчики делают упор на длительные видео, стабильность персонажей и качественную синхронизацию речи, что приближает проект к возможностям коммерческих сервисов.
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍46❤20🔥19
Media is too big
VIEW IN TELEGRAM
Достаточно выделить текст, нажать горячую клавишу — и ИИ мгновенно выполнит нужную задачу прямо там, где вы работаете. Никаких вкладок, браузеров и копирования текста в ChatGPT.
Возможности
Где пригодится?
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍29❤14🔥13
This media is not supported in your browser
VIEW IN TELEGRAM
Зачем оно вам? — чтобы ловко обходить капчи, защиту и глубже понимать контент, который вы собираетесь парсить.
Среди приятных особенностей:
И это далеко не все мелочи, которыми может похвастаться этот продвинутый инструмент.
#python #github #soft
Please open Telegram to view this post
VIEW IN TELEGRAM
👍20❤6🔥2
Распознаёт текст на фото, сканах и даже кривых телефонных снимках с точностью, что ставит Google Vision в неловкое положение.
Что умеет:
from vllm import LLM, SamplingParams
from PIL import Image
from transformers import AutoProcessor
def clean_repeated_substrings(text):
"""Clean repeated substrings in text"""
n = len(text)
if n<8000:
return text
for length in range(2, n // 10 + 1):
candidate = text[-length:]
count = 0
i = n - length
while i >= 0 and text[i:i + length] == candidate:
count += 1
i -= length
if count >= 10:
return text[:n - length * (count - 1)]
return text
model_path = "tencent/HunyuanOCR"
llm = LLM(model=model_path, trust_remote_code=True)
processor = AutoProcessor.from_pretrained(model_path)
sampling_params = SamplingParams(temperature=0, max_tokens=16384)
img_path = "/path/to/image.jpg"
img = Image.open(img_path)
messages = [
{"role": "system", "content": ""},
{"role": "user", "content": [
{"type": "image", "image": img_path},
{"type": "text", "text": "检测并识别图片中的文字,将文本坐标格式化输出。"}
]}
]
prompt = processor.apply_chat_template(messages, tokenize=False, add_generation_prompt=True)
inputs = {"prompt": prompt, "multi_modal_data": {"image": [img]}}
output = llm.generate([inputs], sampling_params)[0]
print(clean_repeated_substrings(output.outputs[0].text))
Где будет полезно:
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥17👍8❤3