Tiếp theoHướng dẫn tiếp theo
Chỉnh sửa một lần Tune-A-Video
AI trực quan
HƯỚNG DẪN AI trực quan
Chỉnh sửa tương tác DragGAN
DragGAN cho phép bạn chỉnh sửa hình ảnh bằng cách kéo các điểm theo đúng nghĩa đen: lấy một điểm và kéo nó vào mục tiêu và hình ảnh sẽ biến dạng một cách thực tế, thay đổi tư thế, hình dạng hoặc biểu cảm.
Nghe hướng dẫn nàyAI thuật lại · ~2 min
Trên trang nàyĐọc trong 2 phút
Tổng quan
Điều này quan trọng vì nó giúp thao tác hình ảnh chính xác, trực quan trở nên khả thi mà không cần thanh trượt, mặt nạ hay lời nhắc văn bản.
Lặn sâu
DragGAN, từ Pan, Tewari, Leimkuhler và các đồng nghiệp tại Max Planck và các đối tác (SIGGRAPH 2023), đã giới thiệu tính năng chỉnh sửa tương tác dựa trên điểm đối với các hình ảnh do GAN tạo ra. Người dùng đặt một hoặc nhiều điểm 'xử lý' trên một hình ảnh và các điểm 'mục tiêu' tương ứng nơi họ sẽ di chuyển. Sau đó, DragGAN liên tục điều chỉnh mã tiềm ẩn để nội dung dưới mỗi tay cầm trượt về phía mục tiêu trong khi phần còn lại của hình ảnh vẫn mạch lạc. Bạn có thể kéo dài chân của động vật, khiến con người mỉm cười, xoay ô tô hoặc thay đổi đường nét của cảnh quan, tất cả đều bằng cách kéo. Điều quan trọng là các chỉnh sửa tôn trọng đa dạng hình ảnh đã học, do đó, kết quả vẫn chân thực thay vì làm mờ các pixel. Mặt nạ tùy chọn hạn chế những vùng được phép di chuyển, mang lại khả năng kiểm soát cục bộ tốt.
Triển khai trong thế giới thực
Điều chỉnh biểu cảm, hướng nhìn hoặc kiểu tóc của chân dung bằng cách kéo các điểm trên khuôn mặt
Thay đổi tư thế và hướng của động vật hoặc phương tiện, chẳng hạn như quay ô tô hoặc định vị lại đầu sư tử
Định hình lại ảnh sản phẩm (kéo dài, mở rộng hoặc đặt lại vị trí đối tượng) cho mô hình thiết kế
Tinh chỉnh hình ảnh phong cảnh hoặc thời trang bằng cách kéo các đường viền, chẳng hạn như thay đổi hình dạng ngọn núi hoặc độ vừa vặn của quần áo
Tương lai của chỉnh sửa tương tác DragGAN
DragGAN đã thúc đẩy công việc tiếp theo nhanh chóng mang lại khả năng kiểm soát dựa trên lực kéo cho các mô hình khuếch tán (chẳng hạn như DragDiffusion và FreeDrag), xử lý ảnh thực và nội dung tùy ý mạnh mẽ hơn so với chỉ riêng GAN. Mong đợi tính năng chỉnh sửa kéo sẽ trở thành một công cụ tiêu chuẩn trong phần mềm sáng tạo, được kết hợp với các điều khiển văn bản và vùng, đồng thời mở rộng sang video và 3D để người dùng có thể đặt các đối tượng trên các khung hoặc định hình lại các mắt lưới một cách tương tác, trong khi vẫn duy trì tính chân thực của ảnh.
Đưa nó vào thực tế
Tại sao nó quan trọng
- Tốc độ và tỷ lệ. Visual AI có thể tự động hóa các nhiệm vụ kiểm tra, phát hiện và gắn thẻ trên quy mô lớn.
- Xây dựng lựa chọn. Các nhóm sáng tạo có thể tạo nguyên mẫu nhanh hơn với ít sửa đổi thủ công hơn.
- Nhóm và quy trình làm việc. Các hoạt động có thể sử dụng tín hiệu hình ảnh và video mà trước đây khó xử lý.
coi chừng
- Quyền và sự đồng ý về hình ảnh có thể trở thành rủi ro pháp lý nếu nguồn gốc xuất xứ không rõ ràng.
- Hiệu suất của mô hình có thể khác nhau tùy theo ánh sáng, nhân khẩu học và môi trường.
- Kết quả dương tính giả có thể không được chú ý trừ khi ngưỡng tin cậy được theo dõi.
Các bước tiếp theo
- Xác định tiêu chí chấp nhận về độ chính xác, thu hồi và chi phí lỗi.
- Kiểm tra với dữ liệu phù hợp với điều kiện sản xuất thực tế.
- Thêm đánh giá của con người đối với những dự đoán có độ tin cậy thấp hoặc tác động cao.
- Theo dõi sự trôi dạt của mô hình và xác nhận lại sau khi thay đổi máy ảnh hoặc tập dữ liệu.
Tiếp tục khám phá
Bản tin miễn phí
Nhận bản tóm tắt AI hàng ngày
Ba câu chuyện AI đã được xác minh vào mỗi buổi sáng các ngày trong tuần, được viết bằng tiếng Anh đơn giản. Miễn phí mãi mãi, không có quảng cáo.
Một email mỗi ngày trong tuần. Hủy đăng ký trong một cú nhấp chuột. Chúng tôi không bao giờ bán hoặc chia sẻ địa chỉ của bạn.
Tự kiểm tra
Take the DragGAN Interactive Editing quiz
Phản hồi tức thì về mọi câu trả lời và chứng chỉ có thể chia sẻ với ID có thể xác minh sau khi bạn vượt qua khóa học.
Hỗ trợ giáo dục AI miễn phí. AI Understanding là tổ chức phi lợi nhuận 501(c)(3) — không bao giờ có quảng cáo, không có tường phí. Hãy quyên góp
Câu hỏi thường gặp
DragGAN Interactive Editing là gì?
DragGAN cho phép bạn chỉnh sửa hình ảnh bằng cách kéo các điểm theo đúng nghĩa đen: lấy một điểm và kéo nó vào mục tiêu và hình ảnh sẽ biến dạng một cách thực tế, thay đổi tư thế, hình dạng hoặc biểu cảm. Nó quan trọng vì nó giúp thao tác hình ảnh chính xác, trực quan mà không cần thanh trượt, mặt nạ hoặc lời nhắc văn bản.
Người dùng chỉnh sửa hình ảnh trong DragGAN như thế nào?
Chỉnh sửa DragGAN hoạt động bằng cách đặt các điểm điều khiển và kéo chúng đến vị trí mục tiêu, làm biến dạng hình ảnh cho phù hợp.
Hai bước cốt lõi xen kẽ của DragGAN là gì?
DragGAN luân phiên giám sát chuyển động (di chuyển các tính năng về phía mục tiêu) và theo dõi điểm (định vị lại tay cầm), lặp đi lặp lại cho đến khi hoàn tất.
Tại sao các chỉnh sửa DragGAN trông thực tế hơn là bị nhòe?
Bởi vì thao tác xảy ra trong không gian tiềm ẩn của GAN đã được huấn luyện trước, nên kết quả đầu ra vẫn ở dạng nhiều hình ảnh thực tế.
Mặt nạ tùy chọn trong DragGAN kiểm soát những gì?
Mặt nạ cho phép người dùng hạn chế chỉnh sửa ở các vùng đã chọn để phần còn lại của hình ảnh được cố định.
DragGAN được giới thiệu đáng chú ý tại địa điểm nào vào năm 2023?
DragGAN được xuất bản tại SIGGRAPH 2023, một hội nghị đồ họa máy tính hàng đầu.
Tiếp tục học hỏi
Hướng dẫn liên quan
Đã chọn thêm hướng dẫn cho chủ đề này