Chưa bao giờ dễ dàng hơn để chuyển một bức ảnh thành hoạt hình, nhờ vào Stable Diffusion. Trong hướng dẫn này, tôi sẽ chỉ cho bạn cách biến hình ảnh thành hoạt hình với img2img sử dụng một mô hình tùy chỉnh.
(Hãy tham khảo phương pháp khác để tạo phong cách cho ảnh mà không cần sử dụng mô hình tùy chỉnh.)
Mục lục
Thiết lập phần mềm
Chúng ta sẽ sử dụng giao diện người dùng GUI của AUTOMATIC1111 trong hướng dẫn này.
Để mục đích trình diễn, chúng tôi sẽ sử dụng các mô hình dưới đây với phong cách hoạt hình. Kỹ thuật này hoạt động với bất kỳ mô hình tùy chỉnh nào có phong cách độc đáo. (Đó là lý do họ tạo mô hình tùy chỉnh, phải không?)
Anything v3 – mô hình phong cách anime.
Inkpunk Diffusion – phong cách minh họa Nhật Bản. (từ khóa: nvinkpunk)
Mo-Di Diffusion – phong cách Disney hiện đại. (từ khóa: phong cách disney hiện đại)
Theo đường dẫn mô hình ở trên để tải xuống mô hình. Đọc bài viết này để tìm hiểu cách cài đặt và sử dụng mô hình tùy chỉnh.
Ghi chú khi sử dụng Hướng dẫn Bắt đầu nhanh
3 mô hình này có sẵn trong Colab Notebook trong Hướng dẫn Bắt đầu nhanh.
Nếu bạn đang sử dụng Colab Notebook trong Hướng dẫn Bắt đầu nhanh, hãy đảm bảo rằng những mô hình này đã được chọn. Chạy cell để bắt đầu GUI AUTOMATIC1111.
Chuyển thành hoạt hình – từng bước một
Tôi sẽ biến một bức ảnh của bạn bè mình mà tôi gặp trong không gian tiềm ẩn thành hoạt hình. Bạn có thể tìm thấy những người bạn khác của cô ấy tại đây.
Ảnh cần chuyển thành hoạt hình
Chúng tôi sẽ sử dụng Inkpunk Diffusion làm mô hình hoạt hình của chúng tôi. Xem phần Phần mềm để biết hướng dẫn thiết lập.
Trong AUTOMATIC1111 GUI, chọn mô hình Inpunk Diffusion trong menu dropdown Stable Diffusion checkpoint.
Chuyển sang tab img2img bằng cách nhấp vào img2img. Tải ảnh bạn muốn chuyển thành hoạt hình lên canvas trong tab con img2img.
Đặt một gợi ý mô tả ảnh của bạn. Bạn cũng cần bao gồm các từ khóa đặc biệt kích hoạt phong cách, nếu có. Đối với Inkpunk Diffusion, đó là nvinkpunk. Vì vậy, gợi ý của tôi là
nvinkpunk A woman sitting outside
Gợi ý tiêu cực là tùy chọn. Theo thói quen (hoặc mê tín), tôi đã sử dụng một:
disfigured, ugly
img2img với một mô hình tùy chỉnh được sử dụng để hoá hoạt hình.
Đặt chiều rộng hoặc chiều cao là 512 và điều chỉnh cái khác để phù hợp với tỷ lệ khung hình của ảnh của bạn. Vì ảnh của tôi là chân dung, tôi đã đặt chiều rộng là 512 và chiều cao là 704. Chọn Cắt và thay đổi kích cỡ để loại bỏ phần không vừa.
Đặt bước lấy mẫu là 30 để có được hình ảnh chất lượng tốt.
Đặt kích cỡ batch là 4 để bạn có một số hình ảnh để lựa chọn. (Chọn lựa là một kỹ năng quan trọng khi sử dụng Stable Diffusion)
Thiết lập bạn cần phải tùy chỉnh là độ mạnh của việc làm giảm nhiễu. Hãy điều chỉnh cài đặt này cẩn thận để có được mức độ thay đổi mà bạn muốn. Không có gì thay đổi khi nó được đặt là 0. Hình ảnh gốc của bạn sẽ bị bỏ qua khi bạn đặt nó là 1. Xung quanh 0.4 là một điểm bắt đầu tốt.
Nhấn Generate để tạo hình ảnh.
Bạn sẽ thấy điều gì đó như dưới đây khi sử dụng các giá trị khác nhau của độ mạnh giảm nhiễu. Chọn giá trị để có được hiệu ứng bạn muốn đạt được!
Nhiều bước img2img
Một thủ thuật mà tôi thường sử dụng là thực hiện nhiều vòng của img2img để điền vào các chi tiết nhỏ hơn.
Bạn nhớ rằng giá trị thấp của img2img tạo ra sự thay đổi nhỏ? Bạn có thể thực hiện một bước với độ mạnh làm giảm nhiễu lớn sau đó là một loạt các giá trị nhỏ. Dưới đây là một ví dụ.
3 vòng của img2img với độ mạnh giảm nhiễu 0.4, 0.27 và 0.27.
Hoặc một loạt các giá trị nhỏ:
4 vòng của img2img với độ mạnh giảm nhiễu 0.2 mỗi lần.
Sử dụng nhiều vòng của img2img, bạn có thể tạo phong cách cho các khu vực cục bộ mà không thay đổi cấu trúc tổng thể.
Sản phẩm cuối cùng
Dưới đây là các hình ảnh đã được biến thành hoạt hình bằng ba mô hình tùy chỉnh.
Đương nhiên, đây chỉ là một ví dụ từ mỗi mô hình. Bạn có thể kiểm soát mức độ mạnh mẽ của hiệu ứng mà bạn muốn theo khẩu vị của bạn.
Bước tiếp theo
Nếu bạn muốn sử dụng nhân vật hoạt hình cho một số công việc sáng tạo khác, bạn có thể loại bỏ nền bằng cách sử dụng một trong những trang web loại bỏ nền AI, ví dụ: remove.bg.
Có lẽ bạn có thể tạo một dải truyện tranh bằng cách yêu cầu bạn bè của mình diễn cảnh, và biến họ thành hoạt hình.
Bạn có thể kết hợp kỹ thuật này với inpainting nếu bạn chỉ muốn thay đổi một phần của hình ảnh. Hoặc các phần khác nhau của hình ảnh được tạo phong cách với các mô hình khác nhau.
Khả năng ở đây là vô tận.
Nguồn từ: https://medium.com/