Bỏ qua tới nội dung chính
Quay lại tin tức

Phân tích ngữ nghĩa khung với mạng RNN phân đoạn biên Softmax và giàn giáo cú pháp

Dev.to Machine Learning· Paperium· 1/6/2026opensource

Dưới đây là bản dịch của văn bản đã cung cấp: **Google DeepMind giới thiệu mô hình AI mới có thể tạo ra các video chân thực từ văn bản** Google DeepMind đã công bố một mô hình AI mới có khả năng tạo ra các video chân thực từ các mô tả văn bản. Mô hình này, được gọi là Lumiere, đại diện cho một bước tiến đáng kể trong lĩnh vực tổng hợp video bằng AI, mang lại khả năng tạo ra các cảnh quay chất lượng cao, chân thực hơn so với các mô hình trước đây. Lumiere được xây dựng dựa trên kiến trúc Space-Time Diffusion (STD), một phương pháp mới cho phép mô hình tạo ra toàn bộ video cùng một lúc, thay vì từng khung hình riêng lẻ. Cách tiếp cận này giúp Lumiere tạo ra các chuyển động nhất quán và chân thực hơn, giải quyết một trong những thách thức chính trong việc tổng hợp video bằng AI. Các tính năng chính của Lumiere bao gồm: * **Tạo video từ văn bản:** Người dùng có thể nhập các mô tả văn bản và Lumiere sẽ tạo ra một video phù hợp với mô tả đó. Ví dụ, một lời nhắc như "một con chó đang chạy trên bãi biển" có thể tạo ra một video về một con chó đang chạy trên bãi biển. * **Tạo video từ hình ảnh:** Lumiere cũng có thể tạo ra các video từ một hình ảnh tĩnh, thêm chuyển động và hoạt ảnh vào hình ảnh ban đầu. * **Tạo kiểu (Stylization):** Mô hình có thể áp dụng các phong cách hình ảnh khác nhau cho video, cho phép người dùng tạo ra các cảnh quay với các hiệu ứng nghệ thuật cụ thể. * **Chỉnh sửa video (Inpainting):** Lumiere có thể điền vào các phần bị thiếu hoặc bị hỏng của video, giúp phục hồi hoặc sửa đổi cảnh quay hiện có. * **Chỉnh sửa video theo phong cách (Stylized Inpainting):** Tính năng này kết hợp chỉnh sửa video với tạo kiểu, cho phép người dùng điền vào các phần của video trong khi áp dụng một phong cách hình ảnh cụ thể. Google DeepMind đã công bố một bài báo nghiên cứu chi tiết về Lumiere, cùng với các ví dụ về video được tạo ra bởi mô hình. Các ví dụ này cho thấy khả năng của Lumiere trong việc tạo ra các video có độ phân giải cao, chuyển động mượt mà và chi tiết chân thực. Mặc dù Lumiere vẫn đang trong giai đoạn nghiên cứu và phát triển, nhưng nó có tiềm năng cách mạng hóa nhiều ngành công nghiệp, bao gồm giải trí, quảng cáo và giáo dục. Khả năng tạo ra các video chân thực từ văn bản có thể mở ra những khả năng mới cho việc kể chuyện, tạo nội dung và trải nghiệm nhập vai. Tuy nhiên, như với bất kỳ công nghệ AI mạnh mẽ nào, cũng có những lo ngại về việc sử dụng sai mục đích tiềm ẩn, chẳng hạn như tạo ra các video giả mạo (deepfakes) hoặc thông tin sai lệch. Google DeepMind đã tuyên bố rằng họ cam kết phát triển AI một cách có trách nhiệm và sẽ tiếp tục nghiên cứu các biện pháp bảo vệ để giảm thiểu những rủi ro này. Lumiere là một minh chứng cho những tiến bộ nhanh chóng trong lĩnh vực AI tạo sinh và hứa hẹn một tương lai nơi việc tạo ra nội dung video chất lượng cao trở nên dễ tiếp cận và hiệu quả hơn.

Paperium Đăng ngày 1/6 • Ban đầu được xuất bản tại paperium.net Phân tích ngữ nghĩa khung với mạng RNN phân đoạn Softmax-Margin và giàn giáo cú pháp #ai #deeplearning #computerscience #machinelearning AI (Loạt 3364 phần) 1 Học tập tác nhân thông qua kinh nghiệm ban đầu 2 MM-HELIX: Tăng cường suy luận phản chiếu chuỗi dài đa phương thức với nền tảng toàn diện và tối ưu hóa chính sách lai thích ứng ... 3360 phần nữa... 3 MemMamba: Suy nghĩ lại các mẫu bộ nhớ trong mô hình không gian trạng thái 4 UniVideo: Hiểu, tạo và chỉnh sửa video thống nhất 5 VideoCanvas: Hoàn thiện video thống nhất từ các bản vá không gian-thời gian tùy ý thông qua điều kiện trong ngữ cảnh 6 DreamOmni2: Chỉnh sửa và tạo dựa trên hướng dẫn đa phương thức 7 Từ cái gì đến tại sao: Một hệ thống đa tác nhân để suy luận điều kiện phản ứng hóa học dựa trên bằng chứng 8 Nhận thức siêu cấp tăng cường các mô hình suy luận: Học tăng cường tự căn chỉnh 9 Khi suy nghĩ gặp sự thật: Suy luận có thể tái sử dụng cho các mô hình ngôn ngữ lớn (LLM) ngữ cảnh dài 10 Các token có xác suất thấp duy trì khám phá trong học tăng cường với phần thưởng có thể xác minh 11 Điệu nhảy căn chỉnh: Đào tạo chung các tác nhân để hợp tác vì sự an toàn 12 Tối ưu hóa chính sách tương đối nhóm không cần đào tạo 13 Tăng cường lai: Khi phần thưởng thưa thớt, tốt hơn là nên dày đặc 14 NewtonBench: Đánh giá khám phá luật khoa học tổng quát trong các tác nhân LLM 15 ARTDECO: Hướng tới tái tạo 3D hiệu quả và độ trung thực cao tức thì với biểu diễn cảnh có cấu trúc 16 DeepPrune: Mở rộng song song không có sự dư thừa giữa các dấu vết 17 Lần thử đầu tiên quan trọng: Xem xét lại vai trò của sự phản ánh trong các mô hình suy luận 18 LLM học cách lừa dối một cách vô ý: Sự sai lệch xuất hiện trong sự không trung thực từ các mẫu sai lệch đến tương tác người-AI thiên vị 19 UniMMVSR: Một khung đa phương thức thống nhất cho siêu phân giải video xếp tầng 20 NaViL: Suy nghĩ lại các thuộc tính mở rộng của các mô hình ngôn ngữ lớn đa phương thức gốc dưới các ràng buộc dữ liệu 21 CoMAS: Các hệ thống đa tác nhân đồng tiến hóa thông qua phần thưởng tương tác 22 PickStyle: Chuyển đổi kiểu video-sang-video với bộ điều hợp ngữ cảnh-kiểu 23 UNIDOC-BENCH: Một điểm chuẩn thống nhất cho RAG đa phương thức tập trung vào tài liệu 24 InstructX: Hướng tới chỉnh sửa hình ảnh thống nhất với hướng dẫn MLLM 25 LongRM: Tiết lộ và mở khóa ranh giới ngữ cảnh của mô hình hóa phần thưởng 26 Học trong công việc: Một tác nhân tự tiến hóa dựa trên kinh nghiệm cho các nhiệm vụ dài hạn 27 Tăng cường các mô hình khuếch tán bằng cách tối ưu hóa ưu tiên nhóm trực tiếp 28 Kiểm soát tạo video chuyển văn bản thành âm thanh thông qua điều kiện và tương tác phương thức nâng cao 29 Kích hoạt điều hòa Entropy: Tăng cường kiểm soát liên tục, các mô hình ngôn ngữ lớn và phân loại hình ảnh với kích hoạt như 30 Truy xuất và củng cố bộ nhớ trong các mô hình ngôn ngữ lớn thông qua các token chức năng 31 Tái chế các điểm kiểm tra được đào tạo trước: Tăng trưởng trực giao của hỗn hợp chuyên gia để đào tạo trước mô hình ngôn ngữ lớn hiệu quả 32 GCPO: Khi độ tương phản thất bại, hãy chọn vàng 33 UP2You: Tái tạo nhanh chóng bản thân từ các bộ sưu tập ảnh không giới hạn 34 OmniRetarget: Tạo dữ liệu bảo toàn tương tác cho thao tác di chuyển toàn thân hình người và tương tác cảnh 35 DexNDM: Thu hẹp khoảng cách thực tế cho vòng quay khéo léo trong tay thông qua mô hình động lực học thần kinh khớp nối 36. A^2Search: Trả lời câu hỏi nhận biết sự mơ hồ bằng học tăng cường. 37. Học cách định tuyến các mô hình ngôn ngữ lớn (LLM) từ phản hồi Bandit: Một chính sách, nhiều sự đánh đổi. 38. Search-R3: Thống nhất suy luận và tạo nhúng trong các mô hình ngôn ngữ lớn. 39. R2RGEN: Tạo dữ liệu 3D từ thực tế sang thực tế để thao tác tổng quát hóa không gian. 40. Drive&Gen: Đồng đánh giá các mô hình lái xe đầu cuối và tạo video. 41. Vượt ra ngoài các giá trị ngoại lệ: Một nghiên cứu về các bộ tối ưu hóa dưới lượng tử hóa. 42. SViM3D: Khuếch tán vật liệu video ổn định để tạo 3D từ một hình ảnh. 43. GyroSwin: Các mô hình thay thế 5D cho mô phỏng nhiễu loạn plasma gyrokinetic. 44. Hướng tới chỉnh sửa 3D có thể mở rộng và nhất quán. 45. Sử dụng mạng trực tuyến nếu có thể: Hướng tới học tăng cường nhanh và ổn định. 46. Thành phần dữ liệu nhận biết độ trung thực để tổng quát hóa robot mạnh mẽ. 47. SciVideoBench: Đánh giá suy luận video khoa học trong các mô hình đa phương thức lớn. 48. Khuếch tán quy mô lớn thông qua tính nhất quán thời gian liên tục được điều chỉnh theo điểm số. 49. Vượt qua giới hạn lượt: Huấn luyện các tác nhân tìm kiếm sâu với cửa sổ ngữ cảnh động. 50. OpenRubrics: Hướng tới tạo tiêu chí tổng hợp có thể mở rộng để mô hình hóa phần thưởng và căn chỉnh LLM. 51. Tư duy bằng camera: Một mô hình đa phương thức thống nhất để hiểu và tạo ra lấy camera làm trung tâm. 52. D2E: Mở rộng tiền huấn luyện thị giác-hành động trên dữ liệu máy tính để chuyển sang AI thể hiện. 53. TAG: Hướng dẫn khuếch đại tiếp tuyến để lấy mẫu khuếch tán chống ảo giác. 54. Tối ưu hóa lời nhắc đa phương thức: Tại sao không tận dụng nhiều phương thức cho MLLM. 55. AutoPR: Hãy tự động hóa việc thăng tiến học thuật của bạn! 56. R-Horizon: Mô hình suy luận lớn của bạn thực sự có thể đi được bao xa về chiều rộng và chiều sâu? 57. Webscale-RL: Quy trình dữ liệu tự động để mở rộng dữ liệu RL đến mức tiền huấn luyện. 58. SpaceVista: Suy luận không gian trực quan ở mọi quy mô từ mm đến km. 59. StreamingVLM: Hiểu biết thời gian thực cho các luồng video vô hạn. 60. Đừng lãng phí sai lầm: Tận dụng các nhóm RL tiêu cực thông qua việc điều chỉnh lại độ tin cậy. 61. ARES: Suy luận thích ứng đa phương thức thông qua định hình entropy cấp mã thông báo nhận biết độ khó. 62. KORMo: Mô hình suy luận mở tiếng Hàn dành cho mọi người. 63. DISCO: Đa dạng hóa việc cô đặc mẫu để đánh giá mô hình hiệu quả. 64. Cầu nối suy luận với học tập: Làm sáng tỏ ảo ảnh bằng cách sử dụng độ phức tạp ngoài tổng quát hóa phân phối. 65. Biến đổi Gaussian lũy tiến với Anisotr.

Nguồn tin: Dev.to Machine Learning — Tác giả: Paperium. Bản dịch tiếng Việt do AI thực hiện, có thể có sai sót.