Framepack on uusi tekoälypohjainen videoiden generointi ohjelma, jonka voi asentaa omalle koneelle. Huomiotavaa kuitenkin on, että omassa koneessa täytyy olla Nvidia -näytönohjain, 6GB muistilla.
FramePackin kehittäjä on lllyasviel, joka on tunnettu tekoälyyn liittyvistä projekteistaan. FramePack on avoimen lähdekoodin työkalu, joka on rakennettu PyTorchin päälle ja suunniteltu erityisesti videoiden generointiin kuluttajatason näytönohjaimilla.
FramePack tarjoaa useita etuja erityisesti videoiden generointiin ja muokkaukseen kuluttajatason laitteilla.
- Matala laitteistovaatimus – Voit luoda korkealaatuisia videoita vain 6 GB VRAM -näytönohjaimella, mikä tekee siitä saavutettavan myös tavallisille käyttäjille.
- Nopea suorituskyky – FramePack hyödyntää next-frame prediction -teknologiaa, joka mahdollistaa sujuvan ja ajallisesti yhtenäisen videotuotannon.
- Paikallinen suoritus – Ei tarvetta pilvipalveluille tai kalliille GPU-vuokrauksille, sillä FramePack toimii suoraan käyttäjän omalla laitteistolla.
- Avoin lähdekoodi – Voit laajentaa, muokata ja integroida FramePackin omiin projekteihisi, mikä tekee siitä joustavan työkalun kehittäjille.
- Pitkien videoiden generointi – Mahdollistaa jopa 120 sekunnin mittaisten videoiden luomisen ilman merkittäviä laitteistorajoituksia.
- Anti-Drifting -teknologia – Estää videon laadun heikkenemisen pitkissä sekvensseissä, mikä parantaa lopputuloksen visuaalista yhtenäisyyttä.
Framepack voidaan ladata github sivustolta:
https://github.com/lllyasviel/FramePack?tab=readme-ov-file
https://github.com/lllyasviel/FramePack/releases/download/windows/framepack_cu126_torch26.7z
7zip:llä pakattu tiedosto puretaan kansioksi omalle koneelle.
Sen jälkeen käynnistetään update.bat tiedosto.
Asennuksen jälkeen ajetaan run.bat tiedosto. Tämä lähtee lataamaan tiedostoja Internetistä, ladattavaa on paljon ~30GB, joten tässä kestää kauan.
Video-ohje tästä asennuksen vaiheesta:
Tämän jälkeen täytyi vielä hiukan haeskella tietoa, mitä vielä pitää tehdä. Windowsista puuttuu vielä riippuvuuksia, kuten Cuda ja PyTorch…
Xformers is not installed, Flash Atten is not installed, Gage Attn is not installed.
Tähän löytyi ratkaisu issues sivulta;
https://github.com/lllyasviel/FramePack/issues/138
After you download the official zip window built Put this zip file in the main directory next to other bat files. Extract the bat file in the main diretory. Run, select option 1 . Wait for the installation to finish.(It will inject python header files for python 3.10.6 for triton to work and install necessary packages. You don’t need to do anything else.)
Edit : The first script I uploaded was giving you options now the script will show what it will do step by step. Just “press any key” to install… For those who may say that I lied in the title well it is 1 click + 1 button installer 🙂
Installer :
Eli piti vielä ladata toinen pakattu tiedosto, purkaa se, ja ajaa .bat tiedosto.
Tämän jälkeen ajaa uudestaan aikaisempi run.bat tiedosto.
Looks like you’re running into a RuntimeError related to torchvision::nms while trying to load certain components from transformers, diffusers, and torchvision.
Here are a few steps to help troubleshoot:
Check Torch and TorchVision Versions
Ensure that torch and torchvision are installed and compatible.
pip list | grep torch
If needed, try reinstalling them using:
pip install torch torchvision –upgrade
Verify Installation Paths
It looks like your Python environment is under
C:\FramePack-asennus\framepack_cu126_torch26. If using a virtual environment, activate it before making changes.
Ensure Correct Dependencies
Some versions of diffusers and transformers may require a specific version of torchvision. Try:
pip install –upgrade diffusers transformers
Test a Simple Import
Run the following in a Python script or interactive shell to check if torchvision loads correctly:
import torchvision
from torchvision.transforms import InterpolationMode
Check for Meta Device Support
If using torch on a CUDA-enabled device, check whether Meta dispatch key exists properly by running:
import torch
print(torch._C._dispatch_has_kernel_for_dispatch_key(“torchvision::nms”, “Meta”))
If it returns False, you might need a different PyTorch version.
If the issue persists, can you let me know what version of Python you’re using? That might help narrow it down!
Ongelma oli siis siinä, että Windows ei tiedä missä Python sijaitsee.
Tämä ei ole pysyvä ratkaisu, koneen uudelleenkäynnistäminen aiheuttaisi taas muistikatkon.
Tällä keinoin, Windows alkaisi ehkä muistamaan paremmin, missä python sijaitsee.
Seuraavaksi;
Try running:
C:\FramePack-asennus\framepack_cu126_torch26\system\python\python –version
If Python responds with its version, you’re on the right path. Now, try installing packages explicitly using:
C:\FramePack-asennus\framepack_cu126_torch26\system\python\python -m pip install –upgrade torch torchvision diffusers transformers
Verify Torch & TorchVision Installations
Check if your torch and torchvision versions are compatible. Run:
C:\FramePack-asennus\framepack_cu126_torch26\system\python\python -m pip list | findstr torch
Jos näiden komentojen tuloste näyttää hyvältä, voidaan taas kokeilla ajaa run.bat uudelleen.
Toinen tapa asentaa on Pinokio selain:
Pinokio on selain, joka mahdollistaa erilaisten tekoälysovellusten asentamisen, suorittamisen ja hallinnan yhdellä napsautuksella. Se toimii virtuaalisena tietokoneena, jossa käyttäjät voivat automatisoida tehtäviä ja hallita palvelimia helposti ilman syvällistä teknistä osaamista. Pinokio tukee monia tekoälymalleja, kuten kuvankäsittelyä, tekstistä puheeksi -sovelluksia ja muita AI-pohjaisia työkaluja.
Sen avulla käyttäjät voivat hyödyntää valmiita skriptejä tai luoda omia automaatioita JSON-komentosarjojen avulla. Tämä tekee siitä joustavan ja tehokkaan ratkaisun tekoälypohjaisten sovellusten hallintaan.
1. Pinokio-selaimen asennus
A. Lataus
- Virallinen verkkosivusto: Ensimmäiseksi, vieraile Pinokion virallisella verkkosivustolla (esimerkiksi osoitteessa pinokio.tietokone tai sen virallisessa GitHub-repositiossa, mikäli sellainen on saatavilla). Verkkosivusto tarjoaa yleensä ladattavan version, joka on yhteensopiva käyttöjärjestelmäsi (Windows, macOS tai Linux) kanssa.
- Asennuspaketin valinta: Valitse juuri sinun järjestelmällesi sopiva asennuspaketti. Pinokio on usein tarjolla pakettina, joka sisältää kaikki tarvittavat riippuvuudet, joten sinun ei tarvitse erikseen ladata ylimääräisiä komponentteja.
B. Asennusvaiheet
- Latauksen aloittaminen: Klikkaa asennuspainiketta ja tallenna tiedosto tietokoneellesi.
- Suorita asennustiedosto: Kun lataus on valmis, käynnistä asennustiedosto. Seuraa asennusohjelman ohjeita:
- Hyväksy käyttöehdot.
- Valitse asennuskansio (voit yleensä käyttää oletusasetuksia).
- Anna asennusohjelman asentaa sovellus – tämä vie yleensä muutamia minuutteja.
- Asennuksen viimeistely: Kun asennus on valmis, käynnistä Pinokio-selain joko suoraan asennusohjelmasta tai etsi sen kuvake työpöydältä/sovellusvalikosta.
2. Pinokio-selaimen käyttö
A. Ensimmäinen käynnistys ja käyttöliittymä
- Käyttöliittymän esittely: Kun käynnistät Pinokion ensimmäisen kerran, sinua tervehtii selkeä ja käyttäjäystävällinen käyttöliittymä. Tämä päävalikko kokoaa yhteen eri tekoälysovelluksia ja skriptejä, joita voit käyttää.
- Valikko ja navigointi: Käyttöliittymässä näet yleensä navigointipaneelin, josta löydät eri kategorioihin järjestettyjä tekoälymalleja (esim. kuvageneraattorit, tekstistä puheeksi -sovellukset, chatbotit, mm.).
- Tilin luominen (valinnainen): Joissakin tapauksissa Pinokio saattaa tarjota tilin luomismahdollisuuden. Tilin avulla pääset hyödyntämään yhteisön jakamia skriptejä, jotka ovat valikoituja ja usein testattuja.
- Jos päätät rekisteröityä, noudata asennuksen aikana tai ensimmäisen käynnistyksen yhteydessä annettuja ohjeita tilin luomiseksi.
B. Sovellusten asennus ja käynnistys
- Sovellusten selaaminen ja valinta:
- Skriptien ja mallien selaus: Käyttöliittymässä on osio, jossa esitellään valmiita skriptejä ja tekoälysovelluksia. Voit selata esimerkiksi joko suosituimpia tai uutuuksia.
- Suodatus ja haku: Usein on mahdollista käyttää hakutoimintoa ja suodatusvalikoita, joiden avulla voit rajata hakua esimerkiksi sovelluksen tyyppiin tai julkaisijan mukaan.
- Asennus yhdellä napsautuksella:
- Asennuksen aloittaminen: Kun löydät haluamasi sovelluksen, napsauta sen kohdalla olevaa “Asenna” -painiketta. Pinokio suorittaa automaattisesti kaikki tarvittavat asennusvaiheet – riippuvuuksien hallinta, ympäristön määrittely ja sovelluksen konfigurointi.
- Asennusprosessi: Prosessi saattaa sisältää komentosarjojen suorittamisen (esim. JSON-komentosarjat), jotka ovat jo valmiita käytettäväksi. Tämä vähentää tarvetta syvälliselle tekniselle osaamiselle.
- Sovelluksen käynnistys:
- Kun asennus on valmis, sovellus näkyy Pinokion ympäristössä. Voit käynnistää sen helposti napsauttamalla sovelluksen kuvaketta tai nimeä.
- Interaktiivinen käyttö: Käyttöliittymässä tarjotaan usein myös ohjaus- ja hallintapaneelit, joiden avulla voit tarkastella sovelluksen suorituskykyä, muuttaa asetuksia tai käynnistää automaatioita.
C. Kehittynyt ohjaus ja integraatio
- Ohjelmallinen ohjaus: Pinokio ei ole pelkästään graafinen käyttöliittymä, vaan se toimii myös virtuaalisena tietokoneympäristönä. Kehittyneemmät käyttäjät voivat hyödyntää sen tarjoamaa API:a tai komentoriviliittymää automatisoidakseen sovellusten hallintaa.
- Tämä voi tarkoittaa esimerkiksi skriptipohjaisten komentojen käyttöönottoa, joissa voit ohjata useita sovelluksia samanaikaisesti.
- Yhteisön tuki ja päivitykset: Pinokio on yhteisöpohjainen ratkaisu, joten säännölliset päivitykset ja uudet skriptit tulevat käyttäjien ja kehittäjien yhteistoiminnassa. Kannattaa seurata virallisia tiedotteita ja foorumeita saadaksesi uusimmat versiot ja ohjeistukset.
