Scribble Diffusion که توسط Zeka توسعه داده شده است، یک وب اپلیکیشن است که از هوش مصنوعی برای تبدیل اسکیس‌های دستی (به همراه یک prompt متنی) به تصاویر هنری جذاب استفاده می‌کند.Scribble Difussion یک پروژه اپن سورس از Replicate است که از هوش مصنوعی برای بهبود شمایل کلی تصاویر شما استفاده می‌کند. این یک مدل متن به تصویر است که با همکاری مهندسان و محققان CompVis ، Stability AI و LAION ایجاد شده است. این مدل مبتنی بر فناوری Latent Difussion است که برای ترکیب تصاویر با مدل‌های مختلف استفاده می‌شود و کیفیت آن‌ها را بالا می‌برد.
بله. با Scribble Diffusion ، مولد AI Art جدید آشنا شوید. مولدی که افراد بی استعداد را به هنرمندان بزرگ تبدیل می‌کند! این وب اپلیکیشن منبع باز، توسط هوش مصنوعی طراحی شده است و کاربران با استفاده از ساختارهای پیچیده شبکه عصبی به کار رفته در آن، می‌توانند اسکیس‌های طراحی شده خود را به نقاشی‌های خیره‌کننده تبدیل کنند. در این مقاله، با به بررسی فناوری زیربنایی این نرم افزار تصویرساز مبتنی بر هوش مصنوعی می‌پردازیم و این که چگونه به خطوط کج و معوج شما روح می‌بخشد، مورد بررسی ما قرار خواهد گرفت.
Scribble Diffusion چیست؟
Scribble Diffusion که توسط Zeka طراحی شده است، یک وب اپلیکیشن است که از هوش مصنوعی برای تبدیل اسکیس‌های دستی (به همراه یک prompt متنی) به تصاویر هنری جذاب استفاده می‌کند. این برنامه نوآورانه بر اساس ControlNet ، ساختار عصبی ایجاد شده توسط لومین ژانگ و مانیش آگراوالا، ساخته شده است. ControlNet به عنوان یک فونداسیون برای Scribble Diffusion عمل می‌کند و اجازه می‌دهد تا ورودی‌های مختلفی مانند رسم خطوط توسط انسان‌ها (Human Scribbling)، در مدل‌های بزرگ Diffusion ادغام شود.
ControlNet که در فوریه منتشر شد، یک ساختار عصبی پیشرو است که فرآیند شرطی‌سازی (Conditioning) Stable Diffusion را با ورودی‌های مختلفی مانند تشخیص لبه (Edge Detection)، نقشه‌های عمق (Depth Maps) و تخمین موقعیت (Pose Estimation) تسهیل می‌کند. توسعه دهندگان قبل‌تر هم از قابلیت‌های ControlNet برای ایجاد اپلیکیشن‌های مختلف استفاده کرده‌اند و ابزارهایی را برای علاقه‌مندان به هوش مصنوعی برای آزمایش انواع مدل‌های مختلف فراهم کرده‌اند.
یکی از اپلیکیشن‌های مهمی که با استفاده از ControlNet توسعه یافته است، DreamBooth است. که تولید تصاویر را با تطبیق وضعیت یک فیگور ورودی انجام می‌دهد. اپلیکیشن دیگری وجود دارد که Riffusion نامیده می‌شود و فریم‌های صوتی را به صورت بلادرنگ به موسیقی هوش مصنوعی تبدیل می‌کند. با پالایش Stable Diffusion ، Riffusion طیف‌نگاری‌هایی ایجاد می‌کند که نمایش‌های بصری صدا هستند. علاوه بر این، Amazing AI نیز وجود دارد که مبتنی بر Stable Diffusion 1.5 است. و به عنوان یک برنامه بومی macOS ، به صورت محلی و بدون نیاز به اینترنت کار می‌کند. چرا که تمام محاسبات روی دستگاه کاربر انجام می‌شود.
ویژگی‌های Scribble Difussion
Scribble Difussion تنها یک ابزار هوش مصنوعی معمولی نیست. این ابزار ترکیبی منحصر به فرد از فناوری پیشرفته و خلاقیت است. بیایید به بررسی ویژگی‌های اصلی آن بپردازیم:
استفاده از هوش مصنوعی: این ابزار از الگوریتم‌های پیشرفته هوش مصنوعی برای تبدیل طرح‌های از پیش طراحی شده با دست، به تصاویر با کیفیت استفاده می‌کند و قدرت هوش مصنوعی را در قلمرو هنر و طراحی به نمایش می‌گذارد.
اپن سورس: این پروژه اپن سورس است، به این معنی که فقط یک ابزار نیست، بلکه بستری برای نوآوری است. هر کسی می‌تواند به صورت رایگان از آن استفاده کند، آن را تغییر دهد یا برای ایجاد برنامه‌های جدید از آن استفاده کند.
ترکیب تصاویر و مدل‌ها با وضوح بالا: Scribble Difussion بر اساس مدلی به نام Latent Difussion ایجاد شده است که به ترکیب تصاویر با وضوح بالا مشهور است. این ابزار تضمین می‌کند که تصاویر شما نه تنها زیبا، بلکه با کیفیت نیز هستند.
کاربردهای Scribble Difussion
Scribble Difussion دارای کاربردهای گسترده و متنوعی است و این موضوع آن را به ابزاری همه کاره در بخش‌های مختلف تبدیل می‌کند:
هنر و طراحی: هنرمندان و طراحان می‌توانند از Scribble Difussion به عنوان یک بوم دیجیتالی برای تبدیل طرح‌های خود به تصاویر هنری استفاده کنند. این موضوع فرآیند طراحی دیجیتال را متحول می‌سازد.
آموزش: این ابزار می‌تواند به عنوان یک ابزار آموزشی منحصر به فرد در دوره‌های هنری و طراحی کارایی داشته باشد. هنرجویان می‌توانند از آن استفاده کنند تا فرآیند اصلاح تصویر و نقش هوش مصنوعی در هنر را درک کنند.
سرگرمی: Scribble Difussion برای کسانی که عاشق طراحی با doodle ها و sketch ها هستند، می‌تواند جادو کند و طرح‌های ساده را به تصاویری زیبا و سرگرم‌کننده تبدیل نماید.
Scribble Diffusion مزایای فراوانی ارائه می‌دهد که آن را هم برای افراد حرفه‌ای و هم برای علاقه‌مندان به ابزاری ارزشمند تبدیل می‌کند:
سهولت استفاده: Scribble Diffusion با رابط کاربرپسند خود، کاری می‌کند که طرح‌های شما با چند کلیک، به تصاویر هنری زیبا تبدیل شوند.
تصاویر باکیفیت: این ابزار هوش مصنوعی تضمین می‌کند که تصاویر تولید شده با کیفیت هستند و افراد حرفه‌ای می‌توانند به عنوان ابزاری قابل اعتماد از آن استفاده کنند.
منبع باز: Scribble Diffusion به عنوان یک پروژه منبع باز، نه تنها برای استفاده رایگان است، بلکه آزادی و نوآوری در اصلاح تصاویر را هم ارائه می‌دهد و خلاقیت شما را تشویق می‌کند.
Scribble Diffusion چگونه کار می‌کند؟
Scribble Diffusion از ترکیب ابزارها و تکنیک‌های پیشرفته استفاده می‌کند تا اسکیس‌های شما را به آثار هنری جذاب تبدیل کند. در این‌جا، نحوه عملکرد این مدل آمده است:
تشخیص خطوط کلی
اولین گام مهم در کار Scribble Diffusion ، تشخیص خطوط کلی است. الگوریتم‌های هوش مصنوعی طرح اولیه کاربر را آنالیز می‌کنند و خطوط کلی و اصلی که ساختار اثر هنری را تعریف می‌کنند، شناسایی می‌کنند.
تشخیص نقاط کلیدی
پس از طرح کلی، Scribble Diffusion به تشخیص نقاط کلیدی طرح می‌پردازد. این فرآیند شامل شناسایی نقاط خاص در طرح مانند گوشه‌ها، لبه‌ها یا قسمت‌های مهم است. با تشخیص نکات کلیدی، این سیستم درک عمیق‌تری از ساختار اثر هنری و عناصر موجود در آن به دست می‌آورد.
جادوی Stable Diffusion
هنگامی که خطوط کلی و نقاط کلیدی استخراج شدند، Scribble Diffusion از تکنیک Stable Diffusion استفاده می‌کند. این روش پیشرفته از ControlNet ، ساختار شبکه عصبی موجود در هسته اپلیکیشن استفاده می‌کند تا فرآیند Diffusion را با شرایط ورودی اضافی، شرطی کند. این شرایط می‌تواند شامل تشخیص لبه (Edge Detection)، نقشه‌های عمق (Depth Maps) تخمین موقعیت (Pose Estimation) یا هر اطلاعات مرتبط دیگری برای بهبود خروجی نهایی باشد.
نتیجه نهایی
با تکمیل مراحل اولیه، Scribble Diffusion خروجی نهایی را تولید می‌کند و یک اسکیس ساده را به یک اثر هنری خیره‌کننده تبدیل می‌کند. الگوریتم‌های هوش مصنوعی از ساختار مشخص‌شده، نقاط کلیدی شناسایی‌شده و ادغام شرایط ورودی مختلف برای ایجاد یک اثر هنری استفاده می‌کنند که واقعاً بیننده را مجذوب خود می‌کند.
چگونه از Scribble Diffusion استفاده کنیم؟
برای ایجاد یک شاهکار هوش مصنوعی با استفاده از Scribble Diffusion ، این مراحل ساده را دنبال کنید:
به وب اپلیکیشن Scribble Diffusion بروید
به وب اپلیکیشن اختصاصی که به طور خاص برای Scribble Diffusion طراحی شده است، دسترسی پیدا کنید. این پلتفرم آنلاین یک رابط کاربرپسند فراهم می‌کند که در آن می‌توانید خلاقیت خود را آژاد کنید. در نقطه شروع، یک گربه از شما استقبال می‌کند!
یک طرح بکشید
از ابزارهای طراحی برنامه برای کشیدن یک طرح ساده استفاده کنید که به عنوان پایه‌ای برای آثار هنری شما عمل می‌کند. ایده‌ها و مفاهیم خود را از طریق خط و خطوط خود بیان کنید و به تخیل‌تان اجازه رهاسازی بدهید.
یک prompt متنی وارد کنید
با ارائه یک prompt متنی که به دیدگاه هنری شما نزدیک‌تر است، اثر هنری خود را بهبود ببخشید. این prompt متنی به عنوان یک شرط ورودی اضافی عمل می‌کند و در طول فرآیند تبدیل، بر الگوریتم‌های هوش مصنوعی تأثیر می‌گذارد.
منتظر بمانید تا فرآیند به پایان برسد
هنگامی که طرح و prompt متنی خود را نهایی کردید، فرآیند تبدیل مبتنی بر هوش مصنوعی را آغاز کنید. بنشینید و به الگوریتم‌های Scribble Diffusion اجازه دهید ورودی‌های شما را تجزیه و تحلیل و تفسیر کنند و یک اثر هنری جذاب از طرح اولیه شما بسازند.
همه چیز آماده است
پس از تکمیل تبدیل، می‌توانید اثر هنری نهایی خود را با فرمت با کیفیتی دانلود کنید. یا می‌توانید شاهکار خود را با دوستان‌تان به اشتراک بگذارید، آن را در شبکه‌های اجتماعی منتشر کنید یا حتی آن را چاپ کنید و در یک گالری قرار دهید.
امکانات این پلتفرم بسیار زیاد است، با این حال، این باب اسفنجی کمی مریض احوال به نظر می‌رسد!
در زیر می‌توانید نمونه‌هایی را که با Scribble Diffusion تولید کرده‌ایم ببینید:
خلاصه این راهنما
استفاده از Scribble Diffusion به آسانی طراحی روی یک کاغذ است. در این‌جا یک راهنمای ساده برای کمک به شما وجود دارد:
- از وب سایت Scribble Diffusion بازدید کنید: آدرس آن این است: scribblediffusion.com
- طرح خود را ایجاد کنید: از ابزارهای طراحی ارائه شده برای ایجاد طرح خود استفاده کنید. اگر طراحی بلد نیستید، نگران نباشید. Scribble Diffusion آن را برایتان اصلاح می‌کند.
- طرح خود را تبدیل کنید: هنگامی که از طرح خود راضی بودید، روی دکمه Go کلیک کنید. سپس این ابزار از الگوریتم‌های خود برای تبدیل طرح شما به یک تصویر هنری استفاده می‌کند.
- آن را بیشتر تست کنید: با خیال راحت، طرح‌های مختلف را تست کنید. شما می‌توانید با استفاده از دکمه‌های Undo و Clear به ترتیب به عقب برگردید یا طرح‌های خود را پاک کنید.
ورود به سیستم
از آن‌جایی که Scribble Diffusion یک پروژه اپن سورس است، برای استفاده از آن نیازی به ورود به سیستم ندارید. شما می‌توانید بلافاصله پس از ورود به سایت، از آن استفاده کنید.
محدودیت‌های Scribble Diffusion
این ابزار محدودیت‌هایی هم دارد. مانند:
- وابسته به ورودی کاربر است: کیفیت تصاویر خروجی تا حد زیادی به کیفیت طرح ورودی بستگی دارد.
- کنترل محدود روی خروجی: کاربران کنترل محدودی روی تصویر خروجی دارند. زیرا هوش مصنوعی تصمیم می‌گیرد که چگونه طرح را اصلاح کند.
- نیاز به اتصال به اینترنت: از آن‌جایی که این یک ابزار مبتنی بر وب است، برای کار کردن به اینترنت نیاز دارد.
مزایا و معایب
از مزایای Scribble Diffusion می‌توان به سهولت استفاده، تصاویر با کیفیت بالا و اپن سورس بودن آن اشاره کرد.
در نقطه مقابل، معایب آن شامل وابستگی به ورودی کاربر، کنترل محدود بر خروجی و نیاز به اینترنت است.
آلترناتیوهای Scribble Diffusion
چندین آلترناتیو برای Scribble Diffusion وجود دارد. از جمله:
- Dall-E 2 : یک مدل متن به تصویر توسعه یافته توسط OpenAI
- MidJourney : یکی دیگر از مدل‌های تبدیل متن به تصویر که در حال حاضر محبوبیت بالایی دارد.
- Stable Diffusion : یک تولید کننده متن به تصویر قدرتمند که در حال حاضر اپن سورس و رایگان است.
با تشکر از هوش مصنوعی، برای ساخت ابزارهایی مثل Scribble Diffusion
ظهور اپلیکیشن‌هایی مثل Scribble Diffusion ، باعث شکل گیری یک جریان جدید در حوزه خلق آثار هنری شده است. این ابزارهای نوآورانه به عنوان پلی بین اسکیس‌های طراحی شده با دست و آثار هنری حرفه‌ای عمل می‌کنند و انقلابی را به ثمر می‌رسانند که در آن، هنرمندان تمام سطوح می‌توانند از خلاقیت خود استفاده کنند.
این اپلیکیشن‌های هوش مصنوعی نه تنها افراد را قادر می‌سازند تا پتانسیل هنری خود را آزاد کنند، بلکه ابزاری برای اصلاح مهارت‌ها و آزمایش سبک‌های هنری مختلف نیز فراهم می‌کنند. با در اختیار داشتن این ابزار، هنرمندان دیگر نیازی به آموزش‌های گسترده یا تجهیزات گران‌قیمت برای خلق شاهکارهای قابل توجه و متمایز ندارند.
همان‌طور که فناوری هوش مصنوعی به پیشرفت خود ادامه می‌دهد، می‌تواند ظهور اپلیکشن‌های پیشگامانه‌تری را هم پیش‌بینی کنیم که نبوغ خالقان انسانی را با قدرت محاسباتی هوش مصنوعی ترکیب می‌کند. این هم‌افزایی هیجان‌انگیز، نوید آن را می‌دهد که مرزهای هنر سنتی جابجا شود. و در نتیجه آثار جذاب و تفکربرانگیزی ایجاد شود که درک ما را از هنر به چالش بکشند.
نتیجه گیری
Stable Diffusion ابزار قدرتمندی است که از هوش مصنوعی برای تبدیل طرح‌ها به تصاویر اصلاح شده استفاده می‌کند. با وجود محدودیت‌هایی که این ابزار دارد، مزایای گوناگونی از جمله سهولت در استفاده، تصاویر با کیفیت و اپن سورس بودن را ارائه ارائه می‌کند. این مبدل متن به تصویر و طرح به تصویر، آلترناتیوهایی هم دارد که هر کدام نقاط ضعف و قوت منحصر به فرد خود را دارند. چه شما یک هنرمند باشید، چه یک طراح، دانش آموز یا کسی که از خلق آثار هنری لذت می‌برد، Stable Diffusion می‌تواند برایتان ابزاری سرگرم‌کننده و مفید باشد.
