Тогда OpenEffect был просто амбициозной идеей в духе: А что если сделать опенсорс аналог Higgsfield, но без подписок, без купи еще кредитов и без привязки к чужой платформе?
Сейчас это уже настоящий проект который мы можем вам показать. Его можно установить, запустить у себя и начать генерировать ИИ-видео буквально через пару минут.
Репозиторий уже открыт на GitHub OpenEffect
Что вообще такое OpenEffect?
Если коротко - это инструмент для генерации ИИ-видео из фотографии через готовые эффекты.
Готовые эффекты это главная фишечка. Пару статей назад я писал, что работа с промтами для генерации видео не такая уж простая задача. Именно тогда мы эти промты и готовили.
Кароче, пайплайн простой: Берешь фотку. Выбираешь эффект. Нажимаешь генерировать. Получаешь крутой ИИ клип
Но ключевая идея проекта не в самой генерации. Генераторов сейчас много.
Идея в том, что это просто твой личный опенсорс комбаин. Взял эффект, у него уже готовая структура, подредачил его как тебе надо и крутой видосик готов.
По сути OpenEffect - это наша попытка сделать опенсорс систему эффектов, а не просто еще одну ИИ-кнопку.
Что сейчас добавили внутрь:
- camera move эффекты,
- atmosphere эффекты,
- transform эффекты,
- встроенный YAML editor,
- импорт/экспорт эффектов,
- история генераций,
- playground для экспериментов.
Проект пока в ранней стадии (камнями не кидать), но уже полностью рабочий.
BYOK - Bring Your Own Key
Это был принципиальный момент.
Скажу честно, мы не собирались делать аналог хагсфилд но с более приятной ценой.
Мы сделали сервис, который работает по модели BYOK - bring your own key.
Проще:
- интерфейс и логика крутятся локально у вас (это и есть опенсорс),
- а генерация идет через API-провайдера (платите какие-то центы за токены генерации, а не скидываетесь на особняк разрабу в Маями).
Первый провайдер у нас fal.ai, потому что у них очень удобный API под разные модели. Там есть буквально все, что надо для генерации.
Пока решили идти именно через апи уже провенных сервисов.
Да, можно замарочится и запустить генерацию у себя дома на 1060 TI 4 gb, предварительно скачав Wan, но оно вам надо?
Даже опенсорс модели требуют огромные GPU и много оперативки. А хорошие закрытые модели вы вообще не достанете.
OpenEffect это просто удобный инференс для создания ИИ-видео
Ненадо самому никаких скриптов писать, игратся с промтами и т.п. зашел на ГХ, качнул, поставил звездочку (спасибо!) и юзаешь уже готовые эффекты в нашем комбаине.
Пара долларов на балансе fal хватит чтобы уже что-то нагенерить и вдоволь поигратся.
Побежали устанавливать?
Как развернуть OpenEffect. Ниже техничка.
Через uvx
Самый простой:
uvx openeffect
Через pip
pip install openeffect
openeffect
Через Docker Compose
curl -O https://raw.githubusercontent.com/openeffect/openeffect/main/docker-compose.yml
docker compose up
После запуска приложение открывается на:
http://localhost:3131
Дальше регаетесь на fal.ai, закидываете туда 10 баксов и вставляете апи-ключ в Settings. Все, можно генерировать.
Что дальше?
Моя честная мотивационная речь:
Сейчас проект находится в ранней стадии. Потэтому именно сейчас можно реально повлиять на то, каким OpenEffect станет дальше:
- какие эффекты появятся,
- какие модели будут поддерживаться,
- какие провайдеры добавятся,
- как будет выглядеть community catalog.
Поэтому для нас самое важное сейчас - просто дать проекту увидеть мир.
Если хотите посмотреть код, поигратся с генерациями или просто поддержать наши идею, велком:
Как выглядит сам UI:
p.s. и если проект зашел идейно - поддержите звездочкой.