הנושאים החמים
כבר הזכרתי פה במאמרים קודמים את הקונטרולנט (controlnet).
הסברתי על יכולותיה המדהימות של האפשרות הזו בסטייבל דיפיוז'ן להגיע לשליטה מלאה בתהליך היצירה שלנו.
עדיין, בסיסמוגרפים של תוכנות הסטייבלדיפיוז'ן לא נרשמה תנועה, וזה מובן. עולם חדש. למי יש כוח?
ללמוד את כל האופציות של הקונטרולנט כשאפשר לבקש מGPT להפוך את התמונה של דודה שרה לדמות בסגנון סטודיו גיבלי?!
אבל בשביל הרצינים שבינינו הנה ההסבר איך אני מגיעה לשליטה מלאה ביצירה שלי
אז לפני שנמשיך בא נסביר שוב – מה זה קונטרולנט (controlnet)
מדובר בכלי עוצמתי שמאפשר לכם "לכוון" את התמונה שנוצרת לפי מבנה שאתם נותנים מראש: סקיצה, פריסה של קווים, תנוחת גוף או אפילו תמונת רפרנס שאתם מעלים.
בעצם האופציה החדשה של צ'אט GPT לתת תמונה ולהפוך אותה לסגנון אחר אבל עם הרבה יותר שליטה. בקונטרול נט אני בעצם נותנת לAI תמונה כרפרנס ואומרת לו מה להעתיק מהתמונה שנתתי לו. אם לדוגמא נתתי לו ציור בסגנון קומיקס של איש ליד מגדל אייפל עם שתי ידיים למעלה. בצ'אט GPT אין לו בדיוק מושג אם ליצור לי ציור שמחקה את הסגנון, את התנוחה של האיש או את המבנה של מגדל אייפל. כמובן, אני יכולה להתחיל לתאר לו בפרומפטים, אבל לא יותר קל שיש כפתור אחד שמכוון אותו? וזה מה שעושה קונטרולנט.
לפניכם סקירה של הסוגים הפופולריים ביותר של קונטרולנט, מתי כדאי להשתמש בכל אחד מהם – ודוגמה ויזואלית לכל אחד:
- קווי מתאר - canny
מתי להשתמש?- כשאתם רוצים לשמור על הקומפוזיציה
- לעבודה מסקיצה לציור סופי או להפוך תמונה לקווי מתאר
דוגמה:
- תנוחה - pose
מתי להשתמש?- כשרוצים שליטה על תנוחת הדמות
- להנפשה מדויקת, לסטוריבורד, קומיקס, או אנימציה
דוגמה:
- עומק - DEPTH
מתי להשתמש?- כשרוצים לשמור על תחושת מרחק/פרספקטיבה
- ביצירת סצנות מורכבות וריאליסטיות
- והנה דבר מפתיע: אני משתמשת בזה הרבה פעמים במקום בתנוחה, כדי לתפוס את התנועה של דמות. במיוחד עם לדמות יש פרספקטיבה חזקה.
דוגמה:
4. Scribble – ציור חופשיאחד הפיצ'רים הכי כיפיים: אתם פשוט מציירים ב־Paint צורה כללית – וה־AI ממלא אותה בדימוי שלם לפי הפרומפט. אין צורך לדייק – רק לסמן מה אתם רוצים איפה.
מתי להשתמש?- כשאתם רוצים רק לסמן רעיון כללי ומהר
- לאיורים יצירתיים, ילדים, סקיצות ראשוניות
שילוביםכמובן, כל קונטרולנט יכול לעבוד בשילוב עם האחרים: אפשר להשתמש ב־OpenPose לקבוע תנוחה, ב־Canny לשמור על מבנה וב־Reference לשמור על סגנון. התוצאה? שליטה מוחלטת, ומהירה. אני כמעט תמיד משתמשת בשילוב של שתי אופציות. לדוגמא: אם יש לי דמות ואני רוצה שהוא גם יעשה את הפוזה שלה וגם ישמור על דוגמת הבגד.
איך משתמשים בקונטרולנט?- מעלים את התמונה הרצויה (סקיצה, תנוחה וכו')
- בוחרים את סוג הקונטרולנט הרצוי
- כותבים פרומפט כמו תמיד
- קובעים את עוצמת ההשפעה של הקונטרולנט (למשל 0.6 זה שמירה חלקית, 1.0 זה שמירה מלאה)
- יוצרים – ונהנים מהתוצאה!
נכון – פלטתי פה עכשיו הרבה מושגים חדשים, ויש מצב שעשיתי לכמה מכם כאב ראש, או הכנסתי אתכם לחרדה מול כמות החומר שיש ללמוד, אבל לאלו פה שמתחת לגיל 30, תנו לי לספר לכם משהו – כשאני התחלתי לצייר לא היה קליפ סטודיו! ופוטושופ עוד היתה עם טיטול. ודור הציירים שלי חצה את המדבר, ועשה את המעבר הקשה מקנבס לסינטיק. חלקם לא נגעו במקלדת לפני כן (כי לא היה!) בהשוואה לזה, מה זה בשבילכם ללמוד עוד כמה כפתורים חדשים? בהצלחה!
| במגזין "משפחה", "בומבך" | עיתון "ילדים", ויוצרת רבי המכר "שלושה אחים" "הרשלה האוסטרופולי" ועוד.
