Deepfake và Face Replacement là gì? Ứng dụng AI thay thế khuôn mặt trong sản xuất phim

Trước đây, khi một bộ phim cần tạo phiên bản trẻ hơn của diễn viên, thay thế khuôn mặt diễn viên đóng thế hoặc xây dựng nhân vật kỹ thuật số có biểu cảm chân thật, ekip kỹ xảo thường phải sử dụng nhiều công đoạn 3D Modeling, Tracking, Animation và Compositing.

Ngày nay, AI có thể hỗ trợ một phần quá trình xử lý hình ảnh khuôn mặt. Từ nhận diện các điểm đặc trưng, theo dõi chuyển động đến tổng hợp những chi tiết hình ảnh mới, công nghệ này mở rộng khả năng sáng tạo của ngành điện ảnh.

Hai thuật ngữ thường xuất hiện là Deepfake và Face Replacement. Tuy liên quan đến việc thay đổi khuôn mặt trên màn hình, chúng không hoàn toàn đồng nghĩa. Hiểu đúng sự khác biệt sẽ giúp nhà làm phim lựa chọn phương pháp kỹ thuật phù hợp, đồng thời tránh những rủi ro về quyền hình ảnh và tính xác thực của nội dung.

Deepfake thường chỉ nội dung hình ảnh, video hoặc âm thanh được tạo hay biến đổi bằng kỹ thuật AI để mô phỏng một người, đặc biệt khi kết quả khiến người xem tưởng rằng người đó đã thực hiện hành động hoặc nói điều không xảy ra.

Face Replacement là quá trình thay thế hoặc tái dựng khuôn mặt của nhân vật trong hình ảnh. Kỹ thuật này có thể sử dụng CGI truyền thống, Compositing, Machine Learning hoặc kết hợp nhiều phương pháp.

Trong sản xuất phim chuyên nghiệp, việc sử dụng hình ảnh và dữ liệu khuôn mặt phải có phạm vi cho phép rõ ràng và được kiểm soát trong suốt quy trình.

Deepfake là gì? Vì sao công nghệ này được nhắc đến trong điện ảnh?

Deepfake là thuật ngữ phổ biến để mô tả những nội dung được tạo hoặc chỉnh sửa bằng Deep Learning nhằm mô phỏng hình ảnh hay giọng nói con người. Công nghệ này có thể tạo cảm giác một người xuất hiện, cử động hoặc phát biểu trong một cảnh mà họ không trực tiếp ghi hình.

Không phải tất cả nội dung sử dụng AI đều được gọi chính xác là Deepfake. AI Denoising, AI Rotoscoping hoặc AI Upscaling không nhất thiết thay đổi danh tính nhân vật. Deepfake thường được thảo luận nhiều hơn khi AI tạo ra sự mô phỏng một con người cụ thể.

Deepfake trong ngữ cảnh VFX

Trong sản xuất phim, kỹ thuật tổng hợp khuôn mặt bằng AI có thể được nghiên cứu để hỗ trợ thay mặt diễn viên đóng thế, thay đổi độ tuổi hình ảnh hoặc phát triển nhân vật kỹ thuật số theo thỏa thuận đã được cấp phép.

Tuy nhiên, chất lượng một cảnh phim không phụ thuộc riêng vào độ giống khuôn mặt. Biểu cảm, chuyển động mắt, ánh sáng, góc Camera và tương tác với môi trường vẫn quyết định hình ảnh có thuyết phục hay không.

Deepfake không đồng nghĩa giả mạo trong mọi trường hợp

Một hiệu ứng được thực hiện minh bạch với sự đồng ý của diễn viên và được sử dụng trong phim hư cấu khác với việc tạo video giả mạo để đánh lừa khán giả về những sự kiện có thật. Sự khác biệt nằm ở mục đích, bối cảnh sử dụng, quyền hình ảnh và cách công bố nội dung.

Face Replacement là gì? Kỹ thuật thay thế khuôn mặt trong phim

Face Replacement là kỹ thuật thay đổi khuôn mặt hiển thị của một nhân vật mà vẫn giữ được phần lớn chuyển động, bố cục và diễn xuất của Footage gốc. Việc thay mặt có thể được thực hiện từng phần hoặc toàn bộ tùy yêu cầu của cảnh quay.

Ví dụ, một diễn viên đóng thế có thể thực hiện cảnh hành động phức tạp, trong khi nhân vật trong phim cần có khuôn mặt của diễn viên chính. Khi các bên đã cho phép sử dụng hình ảnh, VFX Team có thể sử dụng Face Replacement để hỗ trợ tạo sự liên tục cho nhân vật.

Face Replacement không phải chỉ là dán ảnh lên mặt

Góc đầu, cơ mặt, ánh sáng, chuyển động môi và những vùng bị che khuất liên tục thay đổi qua mỗi Frame. Nếu chỉ đặt một bức ảnh tĩnh lên khuôn mặt, hiệu ứng thường mất tự nhiên khi nhân vật quay đầu, nói chuyện hoặc tương tác với ánh sáng.

Quy trình chuyên nghiệp có thể sử dụng 2D/3D Tracking, Facial Rig, Data-driven Synthesis, Rotoscoping, Lighting Matching và nhiều bước chỉnh sửa thủ công để hoàn thiện.

Deepfake, AI Face Swap và CGI Face Replacement khác nhau như thế nào?

Trong hậu kỳ, những thuật ngữ này đôi khi được sử dụng thay thế cho nhau. Tuy nhiên, chúng đề cập đến những cách tiếp cận khác nhau và cần được phân biệt khi lập kế hoạch kỹ thuật.

Vuốt ngang để xem toàn bộ bảng trên điện thoại.

Một dự án có thể kết hợp cả ba phương pháp. Ví dụ, cảnh hành động sử dụng Digital Double cho cơ thể, còn khuôn mặt có thể được xử lý bằng 3D Facial Rig hoặc AI Synthesis sau khi hoàn thành Tracking và Matchmoving.

AI Face Swap hoạt động theo nguyên lý nào?

AI Face Swap là nhóm kỹ thuật sử dụng mô hình học máy để tạo hoặc biến đổi thông tin khuôn mặt trong ảnh/video. Cách triển khai cụ thể khác nhau tùy mô hình, nhưng về mặt khái niệm thường có các giai đoạn phát hiện mặt, phân tích đặc điểm, tổng hợp hình ảnh và kết hợp kết quả vào khung hình.

Nhận diện vùng khuôn mặt

Hệ thống phân tích Footage để xác định vùng mặt và những đặc điểm hình học cần theo dõi. Đây là bước tạo cơ sở để hiệu ứng đi theo chuyển động nhân vật qua thời gian.

Phân tích tư thế và biểu cảm

Hướng nhìn, góc quay đầu, trạng thái mắt và chuyển động miệng cung cấp thông tin giúp kết quả tổng hợp phù hợp hơn với màn diễn gốc. Một số workflow có thể sử dụng Face Landmarks, Face Segmentation hoặc dữ liệu 3D để hỗ trợ.

Tổng hợp hình ảnh

Mô hình AI tạo hình ảnh khuôn mặt dựa trên các dữ liệu đã được cấp phép và bối cảnh hình ảnh đầu vào. Mức độ chi tiết, khả năng giữ danh tính và chất lượng biểu cảm phụ thuộc kỹ thuật, chất lượng dữ liệu và điều kiện Shot.

Compositing và Quality Control

Kết quả tổng hợp không tự bảo đảm khớp với màu da, ánh sáng, Noise hoặc Lens của Footage. VFX Team thường cần chỉnh vùng chuyển tiếp, kiểm tra Temporal Consistency và xử lý những Frame có Artifact.

AI Face Swap mô tả một cách xử lý hình ảnh. Nó không phải giấy phép để sử dụng hình ảnh của bất kỳ người nào. Trong sản xuất thực tế, quyền sử dụng khuôn mặt và dữ liệu diễn viên phải được giải quyết trước công đoạn kỹ thuật.

Face Tracking và Facial Landmarks là gì?

Face Tracking là quá trình xác định và theo dõi vị trí khuôn mặt hoặc các đặc điểm khuôn mặt qua thời gian. Đây là một công đoạn quan trọng trong nhiều hiệu ứng chỉnh sửa mặt, từ Beauty Retouching đến Digital Makeup và Face Replacement.

Facial Landmarks

Facial Landmarks là những điểm đặc trưng như góc mắt, sống mũi, khóe miệng, đường viền hàm hoặc chân mày. Khi được theo dõi qua các Frame, chúng giúp phần mềm ước lượng chuyển động khuôn mặt.

Head Pose Estimation

Head Pose mô tả hướng và góc nghiêng của đầu. Khác biệt giữa góc nhìn chính diện và bán nghiêng có thể ảnh hưởng lớn đến hiệu quả Face Replacement, đặc biệt ở vùng mũi, tai và đường viền khuôn mặt.

Face Segmentation

Segmentation dùng để xác định vùng nào thuộc da mặt, tóc, mắt hoặc những thành phần liên quan. Kết quả hỗ trợ Compositing, nhưng các vùng tiếp giáp tóc và vật thể che mặt có thể cần chỉnh thủ công.

Công cụ Face Tracking của Adobe After Effects có thể phân tích các đặc điểm như mắt, mũi và miệng nhằm điều khiển hiệu ứng hoặc Layer. Tuy nhiên, Face Tracking chỉ cung cấp dữ liệu theo dõi; nó không tự tạo ra Face Replacement chân thật.

Facial Motion Capture liên quan gì đến Face Replacement?

Facial Motion Capture ghi lại hoặc ước lượng chuyển động khuôn mặt của diễn viên. Dữ liệu có thể hỗ trợ hoạt họa Facial Rig hoặc tạo các thông số biểu cảm cho nhân vật số.

Trong Face Replacement, việc giữ được thời điểm chớp mắt, nhịp mở miệng, biểu cảm lông mày và chuyển động các cơ mặt có thể giúp hiệu ứng hòa hợp hơn với diễn xuất gốc.

Facial Capture không phải Face Swap

Facial Capture chủ yếu liên quan đến thông tin chuyển động và biểu cảm. Face Swap liên quan đến hình ảnh nhận diện khuôn mặt được tổng hợp hoặc thay đổi. Một workflow có thể kết hợp hai loại dữ liệu, nhưng chúng không phải một công nghệ duy nhất.

Head-Mounted Camera

Một số hệ Performance Capture dùng Camera đặt gần khuôn mặt diễn viên để ghi nhận chuyển động chi tiết. Phương pháp này có lợi khi cần dữ liệu biểu cảm ổn định cho Character Animation, nhưng cũng đặt ra yêu cầu về thiết bị và Calibration.

Trong dự án diễn xuất tâm lý, sự thay đổi rất nhỏ của mắt và cơ mặt có thể quan trọng hơn hiệu ứng kỹ thuật phô trương. Vì vậy, không nên đánh giá chất lượng Face Replacement chỉ qua mức độ giống khuôn mặt ở một Frame tĩnh.

Digital Double là gì? Khi nào phim cần bản sao diễn viên kỹ thuật số?

Digital Double là phiên bản kỹ thuật số của một diễn viên hoặc nhân vật. Tùy yêu cầu, Digital Double có thể chỉ gồm đầu/khuôn mặt hoặc toàn bộ cơ thể có Model, Texture, Rig và Animation.

Trong những cảnh hành động nguy hiểm, VFX Team có thể sử dụng Digital Double để tạo chuyển động vượt quá khả năng quay trực tiếp hoặc bổ sung các phần không thể ghi hình an toàn. Tuy nhiên, bản sao số không thay thế yêu cầu về quyền hình ảnh và sự đồng ý của người được mô phỏng.

3D Scanning và Photogrammetry

Để xây dựng Digital Double chân thật, ekip có thể thu thập dữ liệu hình học và Texture của diễn viên bằng các phương pháp phù hợp. Hình ảnh tham chiếu, Scan và dữ liệu biểu cảm giúp Artist dựng nhân vật 3D theo yêu cầu.

Facial Rig và Animation

Rig giúp điều khiển cơ mặt, mắt và miệng. Motion Capture hoặc Animation Keyframe được sử dụng để tạo diễn xuất. Những vùng như da, tóc và mắt thường đòi hỏi xử lý riêng để tránh cảm giác nhân vật thiếu sức sống.

Digital Double khác Deepfake

Digital Double có thể được xây dựng hoàn toàn bằng phương pháp CGI. Một bản sao số không mặc định là Deepfake; thuật ngữ Deepfake thường nhấn mạnh kỹ thuật AI mô phỏng con người trong nội dung tổng hợp.

De-aging và Re-aging là gì? AI thay đổi tuổi khuôn mặt trong phim

De-aging là quá trình làm nhân vật trông trẻ hơn trên màn hình. Ngược lại, Re-aging hoặc Digital Aging làm khuôn mặt trông lớn tuổi hơn. Hai kỹ thuật có thể kết hợp Makeup, CGI, Compositing và AI tùy thiết kế sản xuất.

Không chỉ xóa nếp nhăn

Tuổi tác ảnh hưởng đến nhiều đặc điểm như thể tích khuôn mặt, kết cấu da, biểu cảm, ánh sáng trên bề mặt và tỷ lệ của các vùng mềm. Chỉ làm mịn da quá mức có thể khiến nhân vật trông giả hoặc mất tính chân thật.

Giữ được diễn xuất gốc

Một tiêu chí quan trọng là bảo toàn nhịp diễn, sắc thái cảm xúc và khả năng nhận diện của nhân vật. Nếu hiệu ứng làm thay đổi ánh mắt hoặc chuyển động miệng, cảm xúc của cảnh có thể bị ảnh hưởng.

Chọn phương pháp theo Shot

Cảnh cận mặt có thoại thường đòi hỏi kiểm soát chi tiết hơn cảnh Wide. Đội VFX có thể kết hợp chỉnh từng vùng da, thay đổi hình học 3D và các kỹ thuật Image Synthesis thay vì áp một hiệu ứng duy nhất cho toàn bộ Sequence.

Quy trình Face Replacement trong sản xuất phim chuyên nghiệp

Một quy trình chuyên nghiệp bắt đầu từ kế hoạch quay và quyền sử dụng hình ảnh, không phải từ việc lựa chọn mô hình AI. Dưới đây là các bước tổng quan để tổ chức dự án Face Replacement có sự đồng ý và kiểm soát chất lượng.

Face Replacement VFX Workflow

Khung quy trình tham khảo. Độ phức tạp thực tế phụ thuộc loại Shot, quyền được cấp và yêu cầu chất lượng của dự án.

Xác nhận quyền sử dụng hình ảnh

Xác định người được mô phỏng, mục đích, phạm vi sử dụng, thời hạn, nội dung cho phép và quy định quản lý dữ liệu.

Phân tích kịch bản và Shot

Chọn những Shot cần thay mặt; đánh giá góc quay, Close-up, thoại, tương tác và chuyển động đầu.

Chuẩn bị dữ liệu tham chiếu hợp lệ

Sắp xếp ảnh hoặc video được phép sử dụng, thông tin ánh sáng, Lens và những dữ liệu diễn xuất cần thiết.

Quay Footage

Ghi hình với ánh sáng ổn định, đủ chất lượng và thông số Camera rõ ràng để phục vụ Tracking và Compositing.

Face Tracking và Rotoscoping

Theo dõi chuyển động mặt, xác định vùng thay thế và vùng che khuất như tóc, tay hoặc đạo cụ.

Tạo hoặc điều chỉnh khuôn mặt

Thực hiện hiệu ứng bằng CGI, AI hoặc phương pháp Hybrid phù hợp với dữ liệu và quyền được cấp.

Compositing và Color Matching

Ghép hiệu ứng vào Footage, kiểm tra ánh sáng, màu da, các cạnh nối, Noise và những đặc tính quang học.

Temporal Quality Control

Kiểm tra chuyển động giữa các Frame, chớp mắt, miệng, góc đầu, Motion Blur và hiện tượng hình ảnh không nhất quán.

Duyệt nội dung và phạm vi sử dụng

Đối chiếu sản phẩm với thỏa thuận hình ảnh, yêu cầu đạo diễn và phạm vi xuất bản đã được phê duyệt.

Master và quản lý dữ liệu

Lưu thông tin nguồn, phiên bản chỉnh sửa, thời hạn sử dụng, bản Master và chính sách bảo vệ/xóa dữ liệu theo thỏa thuận.

Làm sao để Face Replacement trông tự nhiên trong phim?

Chất lượng Face Replacement không chỉ được quyết định bởi mức độ giống nhân vật. Điều khiến người xem nhận ra một hiệu ứng giả thường là sự không nhất quán giữa khuôn mặt và toàn bộ cảnh quay.

Lighting Match

Nếu cảnh quay có nguồn sáng từ bên trái nhưng khuôn mặt tổng hợp được chiếu sáng từ phía đối diện, hiệu ứng sẽ khó hòa hợp. Ekip phải chú ý hướng sáng, độ tương phản, màu môi trường và những vùng phản chiếu trên da.

Skin Texture và Color

Màu da, độ bóng, lỗ chân lông và chi tiết vi mô cần tương ứng với ánh sáng, Camera và độ phân giải Footage. Việc làm mịn quá mức thường khiến khuôn mặt tách khỏi phần cổ hoặc bàn tay.

Eye Movement và Blink Timing

Mắt là vùng rất nhạy cảm với người xem. Khi hướng nhìn hoặc nhịp chớp mắt không phù hợp với diễn xuất, nhân vật có thể mang cảm giác thiếu tự nhiên dù các phần khác trông tốt.

Occlusion

Tóc, bàn tay, vật dụng hoặc các vật thể đi qua phía trước khuôn mặt phải che đúng hiệu ứng. Rotoscoping hoặc Mask Tracking thường được sử dụng để xử lý những vùng này.

Motion Blur, Grain và Lens Matching

Chuyển động nhanh có thể tạo Motion Blur, còn Footage thực có Film Grain, Noise và các đặc điểm Lens riêng. Hiệu ứng quá sắc nét hoặc quá sạch so với nền có thể làm lộ vùng thay thế.

Đừng chỉ đánh giá Face Replacement bằng một ảnh tĩnh. Hãy phát lại toàn bộ Shot ở tốc độ xem thực, sau đó kiểm tra từng Frame ở những thời điểm nhân vật quay đầu, cười, nói hoặc bị che khuất.

Các phần mềm hỗ trợ Face Tracking và AI VFX trong sản xuất phim

Hệ sinh thái hậu kỳ cung cấp nhiều loại công cụ, từ Tracking và Rotoscoping truyền thống đến các hệ thống Machine Learning. Tuy nhiên, không phải phần mềm nào có Face Tracker cũng tự động hỗ trợ Face Replacement hoàn chỉnh.

Vuốt ngang để xem toàn bộ bảng.

Trong Nuke, CopyCat được Foundry giới thiệu là công cụ cho phép Artist huấn luyện mô hình Machine Learning bằng dữ liệu của dự án để xử lý những tác vụ VFX cụ thể. Đây là ví dụ về cách AI có thể hỗ trợ hậu kỳ mà không đồng nghĩa với thay thế toàn bộ công việc của Compositor.

Những giới hạn của công nghệ AI Face Replacement

Mặc dù AI tạo hình ảnh ngày càng tiến bộ, các Shot có chuyển động nhanh hoặc điều kiện phức tạp vẫn là thách thức đối với Face Replacement.

Vuốt ngang để xem toàn bộ bảng.

Những cảnh có khuôn mặt quay nghiêng mạnh, tóc che mắt, ánh sáng chớp liên tục hoặc đối tượng di chuyển quá nhanh thường cần xử lý chi tiết hơn. Vì thế, không nên hứa hẹn rằng AI có thể tạo kết quả điện ảnh hoàn chỉnh chỉ sau một thao tác.

Ứng dụng Deepfake và Face Replacement trong phim, TVC và nội dung số

Thay mặt diễn viên đóng thế

Trong cảnh nguy hiểm, diễn viên đóng thế có thể thực hiện hành động còn VFX Team hỗ trợ giữ tính liên tục của nhân vật. Việc thay mặt phải nằm trong phạm vi sử dụng hình ảnh đã được diễn viên và những bên liên quan cho phép.

De-aging trong phim truyện

Đối với những câu chuyện trải dài qua nhiều thời kỳ, kỹ thuật kỹ xảo khuôn mặt có thể giúp tái tạo sự thay đổi về độ tuổi, giảm nhu cầu dùng phương pháp Makeup cho một số Shot đặc biệt.

Nhân vật kỹ thuật số trong phim giả tưởng

Digital Double và Facial Animation có thể hỗ trợ nhân vật CGI giữ lại biểu cảm từ diễn viên thật. Đây là một ứng dụng của Performance Capture và Character VFX, không nhất thiết là Deepfake theo nghĩa phổ biến.

Quảng cáo và nội dung thương hiệu

Một số dự án có thể sử dụng gương mặt số của người mẫu hoặc đại sứ thương hiệu trong các phạm vi đã cấp quyền. Tuy nhiên, nội dung không nên khiến khán giả hiểu nhầm rằng một cá nhân đã trực tiếp phát biểu hoặc chứng thực sản phẩm khi điều đó không xảy ra.

Phim ngắn và dự án độc lập

AI có thể hỗ trợ thử nghiệm ý tưởng nhân vật hoặc phát triển những Shot khó thực hiện, nhưng chi phí về dữ liệu, quản lý quyền hình ảnh, Cleanup và QC vẫn cần được tính vào kế hoạch sản xuất.

Ở giai đoạn tiền kỳ, chuẩn bị Studio và setup bối cảnh phù hợp giúp ekip kiểm soát Lighting và góc Camera tốt hơn khi dự án có nhiều phần hậu kỳ khuôn mặt.

Quyền hình ảnh, sự đồng ý và trách nhiệm khi sử dụng Deepfake

Khuôn mặt là yếu tố nhận diện cá nhân. Khi sử dụng AI để mô phỏng hoặc thay thế khuôn mặt, đoàn phim cần kiểm soát không chỉ quyền sử dụng Footage mà còn quyền mô phỏng danh tính, phạm vi khai thác thương mại và quá trình lưu trữ dữ liệu.

Thỏa thuận phải cụ thể

Một thỏa thuận sử dụng hình ảnh thông thường không nên mặc định được hiểu là cho phép mọi hình thức Digital Double, AI Training hay tái sử dụng diễn xuất trong những nội dung mới. Phạm vi cấp phép cần được xác nhận rõ theo từng dự án.

Quản lý dữ liệu khuôn mặt

Dữ liệu hình ảnh, Facial Scan, Video tham chiếu và những Asset kỹ thuật số liên quan nên được phân quyền truy cập. Ekip cần xác định thời hạn giữ dữ liệu, đối tượng được sử dụng và phương án xử lý khi dự án kết thúc.

Minh bạch với người xem

Trong phim hư cấu, kỹ xảo là một phần tự nhiên của nghệ thuật kể chuyện. Tuy vậy, khi nội dung có khả năng bị hiểu nhầm là phát biểu, lời chứng thực hoặc sự kiện thật, việc công bố bản chất tổng hợp có thể đặc biệt quan trọng.

Content Credentials và C2PA

C2PA cung cấp các tiêu chuẩn kỹ thuật để gắn thông tin có thể kiểm tra về nguồn gốc và quá trình chỉnh sửa nội dung. Đây là một phương thức hỗ trợ minh bạch nhưng không bảo đảm mọi tuyên bố gắn trong dữ liệu là đúng, cũng không thay thế việc xin phép người xuất hiện.

Không sử dụng khuôn mặt hoặc giọng nói của người khác để tạo phát biểu, hành động, quảng cáo hoặc lời chứng thực gây hiểu nhầm khi chưa được cho phép. Với diễn viên, người mẫu và nhân vật có thật, hãy xác định quyền sử dụng Digital Likeness trước khi triển khai AI/VFX.

Quy định cụ thể về quyền nhân thân, dữ liệu cá nhân, hợp đồng, quảng cáo và nội dung tổng hợp có thể thay đổi theo quốc gia và từng trường hợp. Dự án thương mại nên được rà soát pháp lý phù hợp.

Công cụ lựa chọn phương pháp kỹ xảo khuôn mặt cho dự án phim

Công cụ dưới đây đề xuất hướng triển khai VFX theo mục tiêu sáng tạo và tính chất Shot. Mỗi phương án đều giả định đã có sự đồng ý hợp lệ của người được sử dụng hình ảnh.

Thử hiệu ứng trên Shot đại diện và kiểm tra tính nhất quán trước khi triển khai toàn bộ Sequence.

Face Replacement Production Checklist

0/8 hạng mục hoàn thành

Mẫu Brief cho dự án Face Replacement VFX

Các bộ phận Producer, Director, VFX Supervisor và hậu kỳ nên thống nhất phạm vi sử dụng hình ảnh trước khi xử lý Footage.

Câu hỏi thường gặp về Deepfake và Face Replacement

Deepfake thường chỉ nội dung được tạo hoặc chỉnh sửa bằng AI để mô phỏng hình ảnh hay giọng nói con người, có thể khiến người xem hiểu rằng họ đã xuất hiện hoặc phát biểu trong một tình huống không xảy ra.

Face Replacement là kỹ thuật thay thế hoặc tái dựng khuôn mặt của nhân vật trong Footage. Có thể sử dụng Compositing, CGI, AI hoặc phối hợp nhiều phương pháp.

Face Swap thường nhấn mạnh thao tác hoán đổi khuôn mặt, nhất là bằng AI. Face Replacement rộng hơn và bao gồm các quy trình VFX truyền thống.

Không. CGI Face Replacement và Digital Double có thể được tạo mà không dùng Deep Learning để mô phỏng danh tính.

Có thể, khi được sử dụng trong phạm vi hư cấu, có sự đồng ý hợp lệ, quyền hình ảnh rõ ràng và quy trình kiểm soát phù hợp.

Là bản sao kỹ thuật số của diễn viên hoặc nhân vật, có thể gồm khuôn mặt hoặc toàn thân 3D, được sử dụng trong các cảnh CGI hoặc VFX.

Đó là kỹ thuật khiến diễn viên hoặc nhân vật trông trẻ hơn, có thể kết hợp Makeup, CGI, Compositing và AI.

Không. Face Tracking đo hoặc theo dõi vị trí, hướng và đặc điểm khuôn mặt; Face Swap là thao tác biến đổi hình ảnh khuôn mặt.

Motion Capture ghi dữ liệu chuyển động, trong khi Face Replacement thay đổi hoặc tái dựng hình ảnh khuôn mặt trong Footage.

Trong những Shot yêu cầu chất lượng cao, kỹ năng Tracking, Rotoscoping, Lighting Match, Compositing và QC vẫn rất quan trọng.

Nguyên nhân có thể là lỗi nhất quán giữa Frame, Face Tracking, Occlusion, thay đổi ánh sáng hoặc giới hạn của mô hình tổng hợp hình ảnh.

After Effects có Face Tracking và các công cụ VFX, nhưng Face Tracker không đồng nghĩa một hệ Face Replacement tự động hoàn chỉnh.

Có. Hệ sinh thái MetaHuman và các công cụ Character Animation hỗ trợ tạo và hoạt họa nhân vật người kỹ thuật số. Điều này không tự động biến Unreal thành công cụ Deepfake.

Cần giải quyết quyền và sự đồng ý phù hợp với mục đích, phạm vi sử dụng, hợp đồng và quy định áp dụng trước khi tạo hoặc khai thác bản sao số.

Không. C2PA giúp ghi nhận và kiểm tra thông tin nguồn gốc hoặc chỉnh sửa khi dữ liệu được hỗ trợ, nhưng thiếu Content Credentials không chứng minh video là giả, và Credential hợp lệ không bảo đảm mọi nội dung là sự thật.

Nên cân nhắc khi có nhu cầu sáng tạo rõ ràng, đủ quyền sử dụng hình ảnh và có khả năng QC. Một Shot được thực hiện tốt có thể phù hợp hơn việc áp AI đại trà cho nhiều cảnh.

Kết luận: AI mở rộng khả năng VFX nhưng không thay thế trách nhiệm của nhà làm phim

Deepfake và Face Replacement cho thấy cách AI có thể tham gia vào quá trình tạo hình ảnh khuôn mặt trong sản xuất phim. Từ Digital Double, De-aging đến xử lý các cảnh diễn viên đóng thế, công nghệ giúp ekip có thêm lựa chọn sáng tạo và kỹ thuật.

Tuy nhiên, một hiệu ứng khuôn mặt chất lượng cao vẫn cần diễn xuất, Tracking, Lighting, Compositing và kiểm tra sự nhất quán giữa các Frame. Đồng thời, quyền sử dụng hình ảnh, dữ liệu cá nhân và sự minh bạch cần được đưa vào kế hoạch ngay từ tiền kỳ.

Công nghệ AI tốt nhất trong điện ảnh không phải công nghệ khiến người xem bị đánh lừa ngoài bối cảnh câu chuyện, mà là công nghệ giúp người làm phim kể chuyện thuyết phục hơn trong phạm vi được phép.

Tài liệu kỹ thuật và nguồn ảnh tham khảo

• Adobe – Face Tracking in After Effects
• Adobe Learn – Tracking Facial Features
• Foundry – Machine Learning với Nuke CopyCat
• C2PA – Content Credentials Explainer
• C2PA – Các đặc tả Content Provenance
• Ảnh Facial Capture – Misterdc / CC BY-SA 4.0
• Ảnh Facial Motion Capture – Luca Bezzi 1979 / CC BY 4.0

AI và kỹ xảo điện ảnh mở ra phương thức sản xuất hình ảnh mới

Deepfake, Face Replacement, Digital Double và các kỹ thuật AI VFX mang đến thêm công cụ cho ngành sản xuất phim hiện đại. Điều quan trọng là sử dụng chúng đúng mục đích, có sự đồng ý và giữ tiêu chuẩn hình ảnh nhất quán.

Kết hợp hậu kỳ kỹ thuật số với công nghệ phim trường ảo như sản xuất ảo bằng LED Wall có thể giúp ekip phát triển quy trình sáng tạo phù hợp với từng dự án.