HƯỚNG DẪN AI trực quan

Chiếu sáng hình ảnh AI

Việc làm sáng lại hình ảnh bằng AI sẽ thay đổi độ sáng của ảnh hiện có, chẳng hạn như di chuyển nguồn sáng, thay đổi màu sắc hoặc phù hợp với nền mới, trong khi vẫn giữ được danh tính và hình dạng của đối tượng.

Nghe hướng dẫn nàyAI thuật lại · ~3 min

Trên trang nàyđọc 4 phút
  1. Tổng quan
  2. Lặn sâu
  3. Triển khai trong thế giới thực
  4. Tương lai của việc chiếu sáng hình ảnh bằng AI
  5. Đưa nó vào thực tế
  6. Tiếp tục khám phá
  7. Câu hỏi thường gặp

Tổng quan

Các công cụ như IC-Light sử dụng mô hình khuếch tán để hiển thị lại bóng và vùng sáng. Điều này quan trọng đối với chụp ảnh sản phẩm, chỉnh sửa chân dung và tổng hợp, trong đó ánh sáng không khớp là một trong những dấu hiệu rõ ràng nhất của hình ảnh giả hoặc được dán vào.

Lặn sâu

Những gì bạn nhìn thấy trong một bức ảnh gần như là kết quả của bề mặt (màu cơ bản hoặc suất phản chiếu, hình dạng và vật liệu của nó) kết hợp với ánh sáng chiếu vào nó. Chiếu sáng lại có nghĩa là thay đổi ánh sáng trong khi không để lại mọi thứ khác. Điều đó thật khó vì một bức ảnh có thể kết hợp các yếu tố này lại với nhau. Các phương pháp cổ điển và học sớm đã cố gắng tách biệt các yếu tố một cách rõ ràng. Phân tích hình ảnh nội tại chia hình ảnh thành suất phản chiếu và bóng. Các mô hình khác ước tính quy chuẩn bề mặt và độ sâu, sau đó tô bóng lại khung cảnh bằng ánh sáng mới được mô tả bằng bản đồ môi trường hoặc sóng hài hình cầu bậc thấp. Nghiên cứu điều chỉnh ánh sáng chân dung, chẳng hạn như Total Relighting (2021) của Google, được đào tạo dựa trên dữ liệu từ các giai đoạn ánh sáng, là những vòm đèn có thể điều khiển được để ghi lại hình ảnh một người trong nhiều điều kiện ánh sáng. Những phương pháp này có thể chính xác nhưng gặp khó khăn bên ngoài dữ liệu huấn luyện của chúng, chẳng hạn như với tóc, kính hoặc các cảnh phức tạp. Chiếu sáng lại dựa trên khuếch tán có một cách tiếp cận khác: một mô hình tổng quát tái hiển thị hình ảnh dưới ánh sáng được yêu cầu. IC-Light (Ánh sáng nhất quán) được phát hành vào năm 2024 bởi Lvmin Zhang, nhà phát triển đằng sau ControlNet. Nó có các phiên bản dựa trên mô tả văn bản về ánh sáng hoặc trên hình nền mới. Ý tưởng đào tạo chính của nó là vận chuyển ánh sáng nhất quán. Trong vật lý, sự xuất hiện của một vật thể dưới sự kết hợp của hai nguồn sáng bằng sự kết hợp sự xuất hiện của nó dưới mỗi ánh sáng. Việc thực thi điều này trong quá trình huấn luyện giúp mô hình thay đổi ánh sáng mà không thay đổi nhận dạng hoặc chi tiết của đối tượng. Có hai quan niệm sai lầm phổ biến. Đầu tiên, chiếu sáng lại không phải là một bộ lọc màu: bộ lọc không thể di chuyển bóng hoặc thêm điểm sáng ở phía đối diện với ánh sáng mới. Thứ hai, mô hình không phục hồi hình học 3D thực sự. Nó tạo ra độ bóng hợp lý, có thể không hoạt động trên văn bản, hoa văn đẹp và bề mặt phản chiếu hoặc khi ánh sáng được yêu cầu không nhất quán về mặt vật lý. Kết quả cũng có thể thay đổi một cách tinh tế các chi tiết như kết cấu da, vì vậy hãy kiểm tra kết quả đầu ra một cách chặt chẽ.

Triển khai trong thế giới thực

Một cửa hàng trực tuyến chụp ảnh sản phẩm dưới ánh sáng studio đơn giản, sau đó chiếu sáng từng sản phẩm cho phù hợp với phông nền phong cách sống để vùng tối và vùng sáng trông nhất quán.

Trình chỉnh sửa chân dung thêm ánh sáng cửa sổ ấm áp từ bên trái vào ảnh chụp cận cảnh được chiếu sáng phẳng, sử dụng lời nhắc văn bản chẳng hạn như 'ánh sáng mặt trời từ cửa sổ bên trái' bằng IC-Light.

Người soạn nhạc sẽ cắt một người ra khỏi một bức ảnh và đặt họ trên một con phố có ánh đèn neon. Họ sử dụng mô hình chiếu sáng lại có điều kiện nền để người dùng chọn ánh sáng màu của cảnh.

Một nhà làm phim đang chuẩn bị kịch bản phân cảnh thử nhiều tâm trạng theo thời gian trong ngày, từ giờ vàng đến u ám, trên cùng một bức ảnh ở địa điểm trước khi quay.

Tương lai của việc chiếu sáng hình ảnh bằng AI

Relighting đang mở rộng từ các hình ảnh đơn lẻ sang video và 3D, trong đó ánh sáng phải nhất quán trên các khung hình và góc nhìn. Nghiên cứu kết hợp các mô hình tổng quát với các ước tính rõ ràng về hình học và vật liệu để cung cấp cho người dùng nhiều quyền kiểm soát vật lý hơn, chẳng hạn như đặt đèn ở một vị trí cụ thể. Việc điều chỉnh ánh sáng cũng ảnh hưởng đến tính xác thực của hình ảnh. Các bóng không nhất quán từ lâu đã là đầu mối để phát hiện các vật liệu tổng hợp, do đó, việc chiếu sáng lại tốt hơn sẽ khiến hàng giả khó phát hiện hơn, điều này càng củng cố luận điểm cho các công cụ xuất xứ như thông tin xác thực nội dung. Đối với người dùng hàng ngày, thay đổi ngắn hạn có khả năng xảy ra nhất là việc cải tiến các tính năng trở nên phổ biến hơn trong các trình chỉnh sửa ảnh thông thường.

Đưa nó vào thực tế

Tại sao nó quan trọng

  • Tốc độ và tỷ lệ. Visual AI có thể tự động hóa các nhiệm vụ kiểm tra, phát hiện và gắn thẻ trên quy mô lớn.
  • Xây dựng lựa chọn. Các nhóm sáng tạo có thể tạo nguyên mẫu nhanh hơn với ít sửa đổi thủ công hơn.
  • Nhóm và quy trình làm việc. Các hoạt động có thể sử dụng tín hiệu hình ảnh và video mà trước đây khó xử lý.

coi chừng

  • Quyền và sự đồng ý về hình ảnh có thể trở thành rủi ro pháp lý nếu nguồn gốc xuất xứ không rõ ràng.
  • Hiệu suất của mô hình có thể khác nhau tùy theo ánh sáng, nhân khẩu học và môi trường.
  • Kết quả dương tính giả có thể không được chú ý trừ khi ngưỡng tin cậy được theo dõi.

Các bước tiếp theo

  1. Xác định tiêu chí chấp nhận về độ chính xác, thu hồi và chi phí lỗi.
  2. Kiểm tra với dữ liệu phù hợp với điều kiện sản xuất thực tế.
  3. Thêm đánh giá của con người đối với những dự đoán có độ tin cậy thấp hoặc tác động cao.
  4. Theo dõi sự trôi dạt của mô hình và xác nhận lại sau khi thay đổi máy ảnh hoặc tập dữ liệu.

Tiếp tục khám phá

Bản tin miễn phí

Nhận bản tóm tắt AI hàng ngày

Ba câu chuyện AI đã được xác minh vào mỗi buổi sáng các ngày trong tuần, được viết bằng tiếng Anh đơn giản. Miễn phí mãi mãi, không có quảng cáo.

Một email mỗi ngày trong tuần. Hủy đăng ký trong một cú nhấp chuột. Chúng tôi không bao giờ bán hoặc chia sẻ địa chỉ của bạn.

Tự kiểm tra

Take the AI Image Relighting quiz

Phản hồi tức thì về mọi câu trả lời và chứng chỉ có thể chia sẻ với ID có thể xác minh sau khi bạn vượt qua khóa học.

Bắt đầu bài kiểm tra

Hỗ trợ giáo dục AI miễn phí. AI Understanding là tổ chức phi lợi nhuận 501(c)(3) — không bao giờ có quảng cáo, không có tường phí. Hãy quyên góp

Câu hỏi thường gặp

Relighting hình ảnh AI là gì?

Việc làm sáng lại hình ảnh bằng AI sẽ thay đổi độ sáng của ảnh hiện có, chẳng hạn như di chuyển nguồn sáng, thay đổi màu sắc hoặc phù hợp với nền mới, trong khi vẫn giữ được danh tính và hình dạng của đối tượng. Các công cụ như IC-Light sử dụng mô hình khuếch tán để hiển thị lại bóng và vùng sáng. Điều này quan trọng đối với chụp ảnh sản phẩm, chỉnh sửa chân dung và tổng hợp, trong đó ánh sáng không khớp là một trong những dấu hiệu rõ ràng nhất của hình ảnh giả hoặc được dán vào.

Việc chiếu sáng lại hình ảnh nhằm mục đích thay đổi điều gì?

Việc chiếu sáng lại chỉ thay đổi ánh sáng trong khi vẫn giữ nguyên bề mặt, bao gồm màu cơ bản, hình dạng và vật liệu.

Phân hủy hình ảnh nội tại tách biệt những gì?

Nó chia hình ảnh thành suất phản chiếu, màu cơ bản của bề mặt và độ bóng, hiệu ứng ánh sáng trên bề mặt đó.

Các giai đoạn ánh sáng được sử dụng trong nghiên cứu điều chỉnh ánh sáng chân dung là gì?

Các giai đoạn ánh sáng là các vòm đèn có thể điều khiển được, ghi lại diện mạo của một người trong nhiều cách thiết lập ánh sáng, cung cấp dữ liệu đào tạo cho các phương pháp như Total Relighting.

Việc đào tạo của IC-Light thực thi nguyên tắc vật lý nào?

Tính nhất quán của việc truyền ánh sáng này giúp mô hình thay đổi ánh sáng mà không thay đổi nhận dạng hoặc chi tiết của đối tượng.

Tại sao bộ lọc màu không thể chiếu sáng lại thực sự?

Bộ lọc điều chỉnh tông màu trên toàn bộ hình ảnh. Những thay đổi về ánh sáng thực sự trong đó bóng đổ và điểm sáng rơi xuống dựa trên hướng của ánh sáng.