First we should consider why we might want to load/use Forge. Initially important is that Forge offers a speed increase compared with Automatic 1111. It is rather dramatic for middle of the road GPUs with six or eight gigs of video ram with decreasing speed boast as ram increases but even then some modest amount. Regardless of the speed increase, the inclusion of Advanced features and extensions might make you want to use it anyway. The easiest way to install Forge is via Pinokio (https://pinokio.computer/) as discussed in last month’s issue. Note that it requires an Nvidia graphics card and you need to first load Pinokio. Then within Pinokio, simply start up the Discover option and search for the Forge script via the search bar or scroll down to find the installer. You will need to download the git file as named or rename if needed, then install and run it. Without Pinokio it’s a more typical install requiring a download and usually some terminal work. Rather than repeating what others have already done I will point you to two videos which explain Forge install. You might want to view both before actual installation. Some installations do not require an Nvideo graphics card but will also work with AMD. See: https://www.youtube.com/watch?v=gJotSdaMFqw or https://www.youtube.com/watch?v=TatD9zNvhqY&t=18s and/or other websites or videos as instructions come and go although your best bet would be an installation for your OS.
Il convient tout d'abord d'examiner les raisons pour lesquelles nous pourrions vouloir charger/utiliser Forge. Le premier point important est que Forge offre une augmentation de la vitesse par rapport à Automatic 1111. C'est plutôt spectaculaire pour les GPU de milieu de gamme avec six ou huit gigaoctets de mémoire vidéo, le surcroît de vitesse diminuant au fur et à mesure que la mémoire augmente, mais même dans ce cas, il s'agit d'une augmentation modeste. Indépendamment de l'augmentation de la vitesse, l'inclusion de fonctionnalités avancées et d'extensions peut vous inciter à l'utiliser.
La façon la plus simple d'installer Forge est de passer par Pinokio (https://pinokio.computer/), comme nous l'avons expliqué dans le numéro du mois dernier. Notez qu'il nécessite une carte graphique Nvidia et que vous devez d'abord charger Pinokio. Ensuite, dans Pinokio, lancez simplement l'option Discover et recherchez le script Forge dans la barre de recherche ou faites défiler l'écran pour trouver l'installeur. Vous devrez télécharger le fichier git tel qu'il est nommé ou le renommer si nécessaire, puis l'installer et le lancer.
Sans Pinokio, il s'agit d'une installation plus classique qui nécessite un téléchargement et généralement un peu de travail sur le terminal. Plutôt que de répéter ce que d'autres ont déjà fait, je vais vous indiquer deux vidéos qui expliquent l'installation de Forge. Vous pouvez les visionner avant de procéder à l'installation. Certaines installations ne nécessitent pas de carte graphique Nvidia mais fonctionnent également avec AMD. Voir : https://www.youtube.com/watch?v=gJotSdaMFqw ou https://www.youtube.com/watch?v=TatD9zNvhqY&t=18s et/ou d'autres sites Web ou vidéos car les instructions vont et viennent, bien que votre meilleure chance soit une installation pour votre système d'exploitation.
Also needed regardless of the install may be appropriate models. What is required depends on how you are using Forge given it can essentially act like Automatic 1111 with expanded capabilities. I am running it on two machines, one with Linux Mint using an Nvidia GeForce 4080 graphics card with 16 GB video ram installed via Pinokio and another with Ubuntu Studio using an Nvidia GeForce RTX 3060 with 4 GB video ram using a more standard install. The screenshots of three different model options are shown. They are very similar except the top one is the standard Stable Diffusion interface as being run within the Pinokio framework (4080 card), the second is Forge, without Pinokio, as seen using the 3060 card within Ubuntu Studio and the third as Forge (4080 card) within Pinokio. The later is using the Flux interface. Exactly what is Flux? It’s a relatively new model (https://blackforestlabs.ai/) that has recently gotten a lot of press. Not perfect but very impressive in terms of photographic-like images created, especially when derived from a real photograph. Sometimes it’s a little too perfect or small imperfections make you start to wonder if they are really photographs. Nevertheless, it’s good enough to scare some people into questioning what is needed to control this ever more capable avalanche of image related AI technology. I am not sure who will win between those trying to monetize it on one hand, the pro legislation crowd worrying about nefarious uses on the other with the unappreciated, unaffiliated creative uses in the middle that keep making it better.
Les modèles appropriés peuvent également être nécessaires, quelle que soit l'installation. Ce qui est nécessaire dépend de la façon dont vous utilisez Forge, étant donné qu'il peut agir en gros comme Automatic 1111 avec des capacités étendues. Je l'utilise sur deux machines, l'une avec Linux Mint utilisant une carte graphique Nvidia GeForce 4080 avec 16 Go de RAM vidéo installée via Pinokio et l'autre avec Ubuntu Studio utilisant une Nvidia GeForce RTX 3060 avec 4 Go de RAM vidéo en utilisant une installation plus standard. Les captures d'écran de trois modèles différents sont présentées. Elles sont très similaires, sauf que celle du haut représente l'interface Stable Diffusion standard exécutée dans le cadre de Pinokio (carte 4080), la deuxième représente Forge, sans Pinokio, en utilisant la carte 3060 dans Ubuntu Studio et la troisième représente Forge (carte 4080) dans Pinokio. Ce dernier utilise l'interface Flux.
Qu'est-ce que Flux exactement ? Il s'agit d'un modèle relativement nouveau (https://blackforestlabs.ai/) qui a récemment fait couler beaucoup d'encre. Il n'est pas parfait, mais il est très impressionnant en termes d'images photographiques créées, en particulier lorsqu'elles sont dérivées d'une photographie réelle. Parfois, c'est un peu trop parfait ou de petites imperfections font que l'on se demande s'il s'agit vraiment de photographies. Néanmoins, c'est assez bon pour effrayer certaines personnes et les amener à s'interroger sur ce qu'il faut faire pour contrôler cette avalanche de technologies d'IA liées à l'image, de plus en plus performantes. Je ne sais pas qui gagnera entre ceux qui essaient de le monétiser d'un côté, les partisans de la législation qui s'inquiètent des utilisations malveillantes de l'autre, et les utilisations créatives non appréciées et non affiliées au milieu, qui continuent de l'améliorer.
Using Forge in Pinokio with a Flux model produces a fairly realistic image of a Bigfoot walking through a library under fluorescent lights with light reflection and a realistic floor. You will notice a variety of options within the screenshot both under the image and on the left are available. Just below the Generate button is an empty style bar which gives you access to what seems to be several hundred styles. You could spend significant time just getting to know the interface. It seems overwhelming and one might have to ask whether you need this kind of creative power. For example if you simply need general images which convey an idea, you might find that Fooocus is more than adequate. Next time I will attempt to address some of the features within Forge using the Flux model. However, for those new to this concept you might want to “try before you buy” meaning get a feel for what is possible before you purchase additional hardware or spend time installing software that you may not need. (It’s already too late for me.) A quick look at https://replicate.com/explore will allow anyone to test the possibilities and still be able to walk away without much cost in time or money and other options do exist. Considering how rapidly this area is advancing and the possible legal issues that may soon start to develop, a prudent approach may be appropriate for those finding the technology overwhelming.
L'utilisation de Forge dans Pinokio avec un modèle Flux produit une image assez réaliste d'un Bigfoot marchant dans une bibliothèque sous des lumières fluorescentes avec des reflets de lumière et un sol réaliste. Vous remarquerez que plusieurs options sont disponibles dans la capture d'écran, à la fois sous l'image et sur la gauche. Juste en dessous du bouton Generate se trouve une barre de style vide qui vous donne accès à ce qui semble être plusieurs centaines de styles. Vous pourriez passer beaucoup de temps à vous familiariser avec l'interface. Elle semble accablante et l'on peut se demander si l'on a besoin d'une telle puissance créative. Par exemple, si vous avez simplement besoin d'images générales qui véhiculent une idée, vous trouverez peut-être que Fooocus est plus que suffisant.
La prochaine fois, j'essaierai d'aborder certaines des fonctionnalités de Forge en utilisant le modèle Flux. Cependant, pour ceux qui découvrent ce concept, il est préférable « d'essayer avant d'acheter », c'est-à-dire de se faire une idée de ce qui est possible avant d'acheter du matériel supplémentaire ou de passer du temps à installer des logiciels dont vous n'avez peut-être pas besoin. (Il est déjà trop tard pour moi.) Un rapide coup d'œil sur le site https://replicate.com/explore permettra à chacun de tester les possibilités et de s'en sortir sans trop dépenser de temps ou d'argent, car d'autres options existent. Compte tenu de la rapidité avec laquelle ce domaine progresse et des problèmes juridiques qui pourraient bientôt se poser, une approche prudente peut s'avérer appropriée pour ceux qui se sentent dépassés par la technologie.