Chuyển tới nội dung chính

🤗 Daily Hugging Face Paper Digest - 2026-03-31

Báo cáo được tạo tự động vào lúc 2026-04-01 10:11:50 bằng mô hình gemini-2.5-flash.

📰 Summary of Papers​


1. TAPS: Task Aware Proposal Distributions for Speculative Sampling (118 votes)​

Tác giả: Mohamad Zbib, Mohamad Bazzi, Ammar Mohanna, Hasan Abed Al Kader Hammoud, Bernard Ghanem

Xuất bản lúc: 2026-03-27

Tag: Speculative Decoding, LLMs, Draft Model, Inference Optimization, Language Models, Deep Learning

I. Main Problem:​

Mặc dù giải mã suy đoán (speculative decoding) giúp tăng tốc quá trình suy luận của các mô hình ngôn ngữ lớn (LLMs), nhưng chất lượng của nó phụ thuộc rất nhiều vào phân phối đề xuất (proposal distribution) của mô hình nháp (draft model). Các mô hình nháp thường được huấn luyện trên các tập dữ liệu tổng quát, khiến cho vai trò của phân phối dữ liệu huấn luyện nháp đối với chất lượng giải mã suy đoán chưa được nghiên cứu rõ ràng. Ngoài ra, việc kết hợp nhiều mô hình nháp chuyên biệt để đạt hiệu suất tốt nhất cũng là một thách thức.

II. Main Idea:​

Nghiên cứu này khảo sát ảnh hưởng của phân phối dữ liệu huấn luyện mô hình nháp lên chất lượng giải mã suy đoán. Các tác giả đã huấn luyện các mô hình nháp nhẹ (HASS và EAGLE-2) trên các tập dữ liệu chuyên biệt (MathInstruct cho lý luận toán học, ShareGPT cho hội thoại) và các biến thể dữ liệu hỗn hợp. Họ đánh giá hiệu suất trên các bộ tiêu chuẩn như MT-Bench, GSM8K, MATH-500 và SVAMP. Đồng thời, nghiên cứu cũng đề xuất và so sánh các chiến lược kết hợp các mô hình nháp chuyên biệt tại thời điểm suy luận (inference time), bao gồm định tuyến dựa trên độ tin cậy (confidence-based routing) và xác minh cây hợp nhất (merged-tree verification), so với việc gộp trọng số (weight averaging) truyền thống.

III. Main Results:​

  1. Chuyên môn hóa rõ ràng: Huấn luyện mô hình nháp trên dữ liệu chuyên biệt mang lại sự chuyên môn hóa rõ rệt. Các mô hình nháp được huấn luyện với MathInstruct mạnh nhất trên các bài kiểm tra lý luận (GSM8K, MATH-500, SVAMP), trong khi các mô hình huấn luyện với ShareGPT mạnh nhất trên MT-Bench (hội thoại).
  2. Huấn luyện dữ liệu hỗn hợp: Huấn luyện với dữ liệu hỗn hợp giúp cải thiện tính mạnh mẽ, nhưng việc trộn dữ liệu lớn hơn không phải lúc nào cũng vượt trội ở mọi nhiệt độ giải mã.
  3. Kết hợp mô hình nháp: Các chiến lược kết hợp mô hình nháp tại thời điểm suy luận (định tuyến dựa trên độ tin cậy và xác minh cây hợp nhất) vượt trội đáng kể so với việc gộp trọng số một cách đơn giản. Xác minh cây hợp nhất mang lại độ dài chấp nhận (acceptance length) cao nhất nói chung.
  4. Tín hiệu định tuyến: Độ tin cậy (confidence) là tín hiệu định tuyến hiệu quả hơn nhiều so với độ hỗn loạn (entropy) để đưa ra các quyết định định tuyến cấp độ benchmark rõ ràng. Các token bị từ chối có xu hướng có độ hỗn loạn cao hơn.

IV. Conclusion & Future Works:​

Chất lượng giải mã suy đoán không chỉ phụ thuộc vào kiến trúc mô hình nháp mà còn vào mức độ phù hợp giữa dữ liệu huấn luyện mô hình nháp và khối lượng công việc hạ nguồn. Các mô hình nháp chuyên biệt nên được kết hợp tại thời điểm suy luận thay vì gộp trọng số. Kết quả nghiên cứu này cung cấp cái nhìn sâu sắc về việc tối ưu hóa hiệu suất giải mã suy đoán thông qua phân phối đề xuất nhận biết tác vụ.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu về Phân phối Đề xuất Thích nghi Động cho Giải mã Suy đoán: Khám phá các phương pháp để mô hình nháp tự động điều chỉnh phân phối đề xuất của nó dựa trên ngữ cảnh thời gian thực hoặc phản hồi từ mô hình đích, nhằm tối ưu hóa độ dài chấp nhận và hiệu suất trên các tác vụ đa dạng mà không cần huấn luyện lại.
  2. Tối ưu hóa Chiến lược Kết hợp Mô hình Nháp Chuyên biệt Dựa trên Học tăng cường: Phát triển một khuôn khổ sử dụng học tăng cường để động học lựa chọn hoặc kết hợp các mô hình nháp chuyên biệt, hoặc các phần của chúng, tại thời điểm suy luận, nhằm đạt được sự cân bằng tối ưu giữa tốc độ và độ chính xác trên nhiều tác vụ và điều kiện giải mã khác nhau.
  3. Đánh giá Ảnh hưởng của Kiến trúc Mô hình Nháp và Kích thước đến Hiệu suất Giải mã Suy đoán trong Môi trường Đa tác vụ: Mở rộng nghiên cứu bằng cách so sánh tác động của các kiến trúc mô hình nháp đa dạng (ví dụ: nhỏ hơn, lớn hơn, khác nhau về loại) và kích thước mô hình đối với khả năng chuyên biệt hóa và hiệu suất giải mã suy đoán trên một bộ tác vụ rộng hơn, bao gồm cả các tác vụ thị giác-ngôn ngữ hoặc giọng nói-ngôn ngữ.

2. Patent:​

  1. Hệ thống Gợi ý Bàn phím Thông minh Tối ưu theo Ngữ cảnh: Một hệ thống trên điện thoại di động có khả năng tự động xác định loại nội dung người dùng đang nhập (ví dụ: email chuyên nghiệp, tin nhắn trò chuyện thông thường, bài toán) và kích hoạt mô hình dự đoán văn bản nhỏ chuyên biệt tương ứng. Việc này giúp bàn phím đưa ra các gợi ý từ và cụm từ chính xác và nhanh chóng hơn, cải thiện tốc độ và trải nghiệm nhập liệu mà không cần người dùng phải chọn thủ công.
  2. Trợ lý Ảo Di động với Phản hồi Nhanh Đa miền: Một trợ lý ảo trên điện thoại sử dụng nhiều mô hình dự đoán phản hồi nhỏ, mỗi mô hình được tối ưu hóa cho một loại câu hỏi hoặc yêu cầu cụ thể (ví dụ: tra cứu thông tin, điều khiển thiết bị, giải quyết vấn đề). Khi nhận được yêu cầu, trợ lý sẽ nhanh chóng chọn mô hình nhỏ phù hợp nhất để đưa ra phản hồi tức thì, sau đó một mô hình lớn hơn sẽ kiểm tra lại để đảm bảo độ chính xác, giúp trợ lý phản hồi nhanh hơn mà vẫn đáng tin cậy trên nhiều lĩnh vực khác nhau.
  3. Ứng dụng Đọc Hiểu và Tóm tắt Tài liệu Tốc độ cao trên Điện thoại: Một ứng dụng trên điện thoại cho phép người dùng đọc tài liệu dài (ví dụ: sách điện tử, báo cáo, tài liệu kỹ thuật). Ứng dụng sẽ sử dụng các mô hình nhỏ, chuyên biệt để phân tích nội dung và dự đoán các phần quan trọng hoặc các điểm chính mà người dùng có thể muốn tập trung vào. Khi người dùng cuộn hoặc tìm kiếm, ứng dụng sẽ nhanh chóng hiển thị các gợi ý tóm tắt hoặc từ khóa liên quan, giúp tăng tốc độ nắm bắt thông tin và đọc hiểu, đặc biệt hữu ích cho các văn bản phức tạp.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27027
ArXiv Abstracthttps://arxiv.org/abs/2603.27027
PDF Downloadhttps://arxiv.org/pdf/2603.27027.pdf
Github Repositoryhttps://github.com/Moe-Zbeeb/TAPS

2. Towards a Medical AI Scientist (64 votes)​

Tác giả: Hongtao Wu, Boyun Zheng, Dingjie Song, Yu Jiang, Jianfeng Gao, Lei Xing, Lichao Sun, Yixuan Yuan

Xuất bản lúc: 2026-03-30

Tag: Medical AI, LLMs, Autonomous Systems, Scientific Discovery, Benchmarking, Multi-agent Systems, Healthcare AI

I. Main Problem:​

Các hệ thống "AI Scientist" hiện tại thiếu tính chuyên biệt cho lĩnh vực y tế lâm sàng, không thể dựa trên bằng chứng y khoa và các phương thức dữ liệu chuyên biệt. Chúng bỏ qua các tiền đề y tế, thiếu ràng buộc trong quá trình truy xuất và suy luận để xác định bằng chứng y tế có thẩm quyền, dẫn đến hiệu suất hời hợt. Dữ liệu y tế không đồng nhất, đa chiều và các tiêu chuẩn đánh giá chuyên biệt đặt ra thách thức cho việc thực hiện thí nghiệm đáng tin cậy. Ngoài ra, các hệ thống hiện có thường bỏ qua các yêu cầu về nguồn gốc dữ liệu, tuyên bố đạo đức và không tuân thủ các khuôn khổ viết bài lâm sàng cũng như các tiêu chuẩn đạo đức, gây ra nút thắt cổ chai nghiêm trọng trong nghiên cứu y tế do tốc độ tăng trưởng dữ liệu và tài liệu nhanh chóng.

II. Main Idea:​

Công trình giới thiệu Medical AI Scientist, khuôn khổ nghiên cứu tự động đầu tiên được thiết kế riêng cho nghiên cứu tự trị lâm sàng. Hệ thống tạo ra các ý tưởng dựa trên lâm sàng bằng cách chuyển đổi tài liệu khảo sát thành bằng chứng có thể hành động thông qua cơ chế đồng tư duy giữa bác sĩ lâm sàng và kỹ sư, giúp cải thiện khả năng truy xuất nguồn gốc của các ý tưởng nghiên cứu. Medical AI Scientist cũng giới thiệu việc soạn thảo bản thảo bài báo dựa trên bằng chứng, được hướng dẫn bởi mô hình viết y khoa có cấu trúc và các chính sách đạo đức. Khung này hoạt động dưới 3 chế độ nghiên cứu: tái tạo dựa trên bài báo, đổi mới lấy cảm hứng từ tài liệu và khám phá theo nhiệm vụ. Hệ thống bao gồm ba thành phần chính: Idea Proposer, Experimental Executor và Manuscript Composer. Để đánh giá, công trình cũng giới thiệu Med-AI Bench, một bộ tiêu chuẩn toàn diện gồm 171 trường hợp đánh giá chất lượng cao, bao gồm 19 nhiệm vụ lâm sàng riêng biệt và 6 phương thức dữ liệu.

III. Main Results:​

Các ý tưởng do Medical AI Scientist tạo ra có chất lượng cao hơn đáng kể so với các LLM thương mại trên 171 trường hợp, bao gồm 19 nhiệm vụ lâm sàng và 6 phương thức dữ liệu, được đánh giá bởi cả LLM và chuyên gia con người. Hệ thống vượt trội hơn các LLM thương mại (GPT-5, Gemini-2.5-Pro) trên sáu khía cạnh chất lượng ý tưởng (tính mới, độ trưởng thành, tính đạo đức, khả năng tổng quát hóa, tiện ích và khả năng giải thích). Hệ thống đạt được sự phù hợp chặt chẽ giữa phương pháp đề xuất và việc triển khai, đồng thời chứng minh tỷ lệ thành công cao hơn đáng kể trong các thí nghiệm có thể thực thi (đạt 0.91 trong chế độ tái tạo, 0.93 trong đổi mới dựa trên tài liệu và 0.86 trong chế độ khám phá theo nhiệm vụ). Các đánh giá mù đôi của chuyên gia con người và Stanford Agentic Reviewer cho thấy các bản thảo được tạo ra đạt chất lượng tương đương MICCAI và vượt trội hơn ISBI và BIBM. Một bản thảo của hệ thống đã được chấp nhận tại ICAIS 2025.

IV. Conclusion & Future Works:​

Medical AI Scientist làm nổi bật tiềm năng của việc ứng dụng AI vào khám phá khoa học tự động trong lĩnh vực chăm sóc sức khỏe. Các hệ thống tự động có thể tăng tốc thiết kế phương pháp luận phức tạp, từ đó nâng cao đáng kể hiệu quả của nghiên cứu AI y tế. Điều này mở ra hướng phát triển các hệ thống AI tự động có khả năng học hỏi, thích ứng liên tục và tích hợp sâu hơn vào quy trình nghiên cứu y khoa, giải quyết các thách thức phức tạp hơn trong tương lai.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu các cơ chế đồng tư duy tiên tiến: Phát triển các mô hình đồng tư duy giữa bác sĩ lâm sàng và kỹ sư tích hợp phản hồi đa chiều từ các chuyên gia y tế khác (ví dụ: dược sĩ, nhà tâm lý học) và dữ liệu lâm sàng thời gian thực để tạo ra các ý tưởng nghiên cứu không chỉ mới mẻ mà còn có khả năng ứng dụng thực tế cao và phù hợp với bối cảnh chăm sóc sức khỏe đa dạng.
  2. Mở rộng khám phá AI y tế cho các lĩnh vực chuyên sâu: Phát triển các tác nhân AI tự động có khả năng tạo ra giả thuyết và thiết kế thí nghiệm trong các lĩnh vực y tế chuyên biệt như y học cá nhân hóa, bệnh hiếm, hoặc phẫu thuật robot, nơi yêu cầu sự hiểu biết sâu sắc về sinh lý bệnh và kỹ thuật y khoa tiên tiến, vượt ra ngoài các nhiệm vụ và phương thức dữ liệu hiện tại.
  3. Tối ưu hóa quy trình thực thi thí nghiệm tự động bằng học tăng cường: Nghiên cứu áp dụng các kỹ thuật học tăng cường (Reinforcement Learning) để cho phép trình thực thi thí nghiệm tự động học hỏi từ các kết quả thử nghiệm, tự điều chỉnh các chiến lược thiết kế thí nghiệm, lựa chọn mô hình và tối ưu hóa tham số để đạt được hiệu suất cao nhất và đẩy nhanh tốc độ khám phá khoa học.

2. Patent:​

  1. Một ứng dụng di động hỗ trợ bác sĩ lâm sàng tạo ra các giả thuyết chẩn đoán và kế hoạch điều trị sơ bộ dựa trên dữ liệu bệnh nhân. Ứng dụng này sẽ sử dụng AI để phân tích các triệu chứng, lịch sử bệnh án (được nhập thủ công hoặc tích hợp an toàn), và truy xuất bằng chứng y khoa liên quan từ cơ sở dữ liệu để đề xuất các ý tưởng chẩn đoán hoặc các hướng nghiên cứu sâu hơn, giúp bác sĩ đưa ra quyết định nhanh chóng và có căn cứ hơn.
  2. Một công cụ trên điện thoại thông minh dành cho sinh viên y khoa và bác sĩ tập sự để luyện tập và nhận phản hồi về việc soạn thảo báo cáo y tế. Ứng dụng sẽ cung cấp các mẫu báo cáo chuẩn, kiểm tra tính đầy đủ của thông tin, sự mạch lạc trong lập luận và tuân thủ các tiêu chuẩn đạo đức y tế, đồng thời đưa ra các gợi ý để cải thiện chất lượng bản thảo, mô phỏng chức năng của Manuscript Composer.
  3. Một tính năng AI tích hợp vào ứng dụng sức khỏe cá nhân trên điện thoại, cho phép người dùng (không phải chuyên gia y tế) nhập một câu hỏi về sức khỏe hoặc một vấn đề y tế. AI sẽ tổng hợp thông tin từ các tài liệu y khoa có thẩm quyền, cung cấp các phân tích đơn giản, dễ hiểu về các lựa chọn điều trị tiềm năng, rủi ro, hoặc các hướng nghiên cứu đang được tiến hành, giúp người dùng hiểu rõ hơn về tình trạng sức khỏe của mình và tham vấn bác sĩ hiệu quả hơn, với sự nhấn mạnh vào tính chính xác và an toàn.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28589
ArXiv Abstracthttps://arxiv.org/abs/2603.28589
PDF Downloadhttps://arxiv.org/pdf/2603.28589.pdf
Github RepositoryN/A

3. Gen-Searcher: Reinforcing Agentic Search for Image Generation (45 votes)​

Tác giả: Kaituo Feng, Manyuan Zhang, Shuang Chen, Yunlong Lin, Kaixuan Fan, Yilei Jiang, Hongyu Li, Dian Zheng, Chenyang Wang, Xiangyu Yue

Xuất bản lúc: 2026-03-30

Tag: Image Generation, Agentic Reinforcement Learning, Multimodal, Text-to-Image, RAG, Deep Search

I. Main Problem:​

Các mô hình tạo ảnh gần đây bị giới hạn bởi 'kiến thức nội bộ đóng băng' đã học được trong quá trình tiền huấn luyện, khiến chúng thường thất bại trong các tình huống thực tế đòi hỏi nhiều kiến thức hoặc thông tin cập nhật (ví dụ: các địa danh cụ thể, nhân vật công chúng, sản phẩm mới ra mắt). Các phương pháp dựa trên RAG hiện có bị hạn chế bởi cơ sở dữ liệu tĩnh và khả năng truy xuất nông cạn, không thể xử lý các truy vấn phức tạp đòi hỏi tìm kiếm đa bước. Các quy trình làm việc dựa trên gợi ý thủ công cũng thường kém hiệu quả và không thích ứng được.

II. Main Idea:​

Gen-Searcher là nỗ lực đầu tiên để huấn luyện một tác nhân tạo ảnh tăng cường tìm kiếm, thực hiện suy luận đa bước và tìm kiếm để thu thập kiến thức văn bản và hình ảnh tham chiếu cần thiết cho việc tạo ảnh có căn cứ. Để đạt được điều này, các tác giả đã xây dựng một quy trình dữ liệu chuyên biệt, tạo ra hai bộ dữ liệu chất lượng cao (Gen-Searcher-SFT-10k và Gen-Searcher-RL-6k) và một bộ tiêu chuẩn đánh giá toàn diện (KnowGen) đòi hỏi kiến thức bên ngoài được căn cứ bằng tìm kiếm. Gen-Searcher được huấn luyện với SFT (Supervised Fine-Tuning) và sau đó là học tăng cường tác nhân (agentic reinforcement learning) sử dụng phản hồi phần thưởng kép, kết hợp phần thưởng dựa trên văn bản và dựa trên hình ảnh để cung cấp tín hiệu học tập ổn định và giàu thông tin hơn cho quá trình huấn luyện GRPO.

III. Main Results:​

Gen-Searcher mang lại những cải tiến đáng kể, nâng cao hiệu suất của Qwen-Image khoảng 16 điểm trên KnowGen và 15 điểm trên WISE. Phương pháp này cũng cho thấy khả năng chuyển giao mạnh mẽ: một Gen-Searcher được huấn luyện với Qwen-Image có thể được áp dụng trực tiếp cho Seedream 4.5 và Nano Banana Pro mà không cần huấn luyện bổ sung, mang lại mức cải thiện lần lượt là khoảng 16 điểm và 3 điểm. Điều này chứng tỏ hiệu quả và tính mạnh mẽ của Gen-Searcher trong việc tăng cường tạo ảnh trong các kịch bản thực tế, đòi hỏi nhiều kiến thức. Các tác giả đã công khai toàn bộ dữ liệu, mô hình và mã nguồn.

IV. Conclusion & Future Works:​

Gen-Searcher là nỗ lực tiên phong trong việc huấn luyện một tác nhân tìm kiếm đa phương thức sâu sắc cho việc tạo ảnh, thiết lập một nền tảng mở cho nghiên cứu trong tương lai. Công trình này đã chứng minh hiệu quả đáng kể và khả năng chuyển giao mạnh mẽ của phương pháp. Các hướng nghiên cứu trong tương lai có thể tập trung vào việc cải thiện hơn nữa tính thẩm mỹ của hình ảnh được tạo ra, đặc biệt khi cần tích hợp thông tin từ nhiều hình ảnh tham chiếu, cũng như khám phá các chiến lược tối ưu hóa phần thưởng để giảm thiểu bất kỳ sự suy giảm nào về chất lượng hình ảnh tổng thể.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu các kỹ thuật tổng hợp đa phương thức nâng cao để tích hợp các kết quả tìm kiếm đa dạng (sự kiện văn bản, tham chiếu hình ảnh) vào một gợi ý tạo ảnh mạch lạc, tập trung đặc biệt vào việc duy trì chất lượng thẩm mỹ đồng thời đảm bảo tính chính xác về mặt dữ kiện và hình ảnh.
  2. Phát triển các chiến lược tìm kiếm thích ứng cho việc tạo ảnh tác nhân, trong đó tác nhân tự động điều chỉnh độ sâu và độ rộng tìm kiếm dựa trên độ phức tạp và cường độ kiến thức của gợi ý, có thể kết hợp phản hồi của người dùng theo thời gian thực hoặc phát hiện sự mơ hồ.
  3. Khám phá ứng dụng của mô hình tìm kiếm tác nhân của Gen-Searcher cho các tác vụ tạo sinh đòi hỏi nhiều kiến thức khác ngoài hình ảnh, chẳng hạn như tạo video, tạo mô hình 3D hoặc tổng hợp tài liệu phức tạp, yêu cầu suy luận đa bước và truy xuất dữ liệu bên ngoài.

2. Patent:​

  1. Một tính năng trên điện thoại di động giúp tự động tìm kiếm thông tin liên quan đến ngữ cảnh của một bức ảnh (ví dụ: địa danh nổi tiếng, chi tiết sản phẩm cụ thể, sự kiện lịch sử tại địa điểm) ngay sau khi người dùng chụp ảnh. Sau đó, một hệ thống trí tuệ nhân tạo sẽ sử dụng thông tin này để đề xuất các cải tiến thông minh hoặc chỉnh sửa phong cách cho bức ảnh, ví dụ như thêm các yếu tố lịch sử vào ảnh địa danh, tạo logo thương hiệu của một sản phẩm nếu bị thiếu, hoặc điều chỉnh tinh tế các chi tiết hình ảnh dựa trên dữ liệu thực tế.
  2. Một ứng dụng điện thoại di động cho phép người dùng mô tả một hình ảnh mong muốn, bao gồm các khái niệm trừu tượng hoặc đòi hỏi nhiều kiến thức (ví dụ: 'chiếc xe hơi mới của bạn tôi tên John, một chiếc SUV điện đời 2025, đậu trước tháp Eiffel'). Ứng dụng sẽ sử dụng một tác nhân tìm kiếm thông minh để tìm kiếm thông tin thời gian thực về 'chiếc xe mới của John' (nếu được liên kết với danh bạ/mạng xã hội của người dùng), 'SUV điện đời 2025' (kiểu dáng, hình thức) và 'tháp Eiffel' (hình ảnh, ngữ cảnh), sau đó tạo ra một hình ảnh cá nhân hóa, có căn cứ. Điều này vượt xa việc chỉ tạo ảnh từ văn bản đơn thuần bằng cách chủ động tìm kiếm và định vị các tham chiếu trong thế giới thực.
  3. Một tính năng thương mại điện tử trên thiết bị di động cho phép người dùng tạo ra các hình ảnh sản phẩm được tùy chỉnh cao. Thay vì các ảnh sản phẩm tĩnh, người dùng có thể nhập các chi tiết như 'chiếc váy cụ thể này trên một người mẫu giống tôi, đứng trên bãi biển lúc hoàng hôn, với một chiếc túi xách mới ra mắt từ thương hiệu X.' Hệ thống sẽ sử dụng tìm kiếm để tìm các tham chiếu hình ảnh cho sự giống nhau của người dùng (từ ảnh hồ sơ), chiếc váy cụ thể, chiếc túi xách (bao gồm các mẫu cập nhật), và khung cảnh hoàng hôn trên bãi biển, sau đó tạo ra một hình ảnh trực quan độc đáo, chân thực, được cá nhân hóa theo yêu cầu của người dùng.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28767
ArXiv Abstracthttps://arxiv.org/abs/2603.28767
PDF Downloadhttps://arxiv.org/pdf/2603.28767.pdf
Github Repositoryhttps://github.com/tulerfeng/Gen-Searcher

4. Emergent Social Intelligence Risks in Generative Multi-Agent Systems (41 votes)​

Tác giả: Yue Huang, Yu Jiang, Wenjie Wang, Haomin Zhuang, Xiaonan Luo, Yuchen Ma, Zhangchen Xu, Zichen Chen, Nuno Moniz, Zinan Lin, Pin-Yu Chen, Nitesh V Chawla, Nouha Dziri, Huan Sun, Xiangliang Zhang

Xuất bản lúc: 2026-03-29

Tag: Multi-agent systems, Generative AI, Emergent risks, Social intelligence, Collusion, Conformity, Bias, Governance

I. Main Problem:​

Hệ thống đa tác nhân (MAS) được xây dựng từ các mô hình tạo sinh lớn đang nhanh chóng được triển khai trong thế giới thực để cùng lập kế hoạch, đàm phán và phân bổ tài nguyên nhằm giải quyết các nhiệm vụ phức tạp. Tuy nhiên, tương tác tập thể của chúng tạo ra các chế độ lỗi mới nổi không thể quy về từng tác nhân riêng lẻ. Các rủi ro này bao gồm sự phối hợp giống như thông đồng (collusion-like coordination) và sự tuân thủ (conformity), xuất hiện thường xuyên ngay cả khi không có hướng dẫn rõ ràng, phản ánh các bệnh lý xã hội ở con người và không thể ngăn chặn chỉ bằng các biện pháp bảo vệ cấp độ tác nhân hiện có.

II. Main Idea:​

Nghiên cứu này trình bày một nghiên cứu tiên phong về các rủi ro đa tác nhân mới nổi, phân loại chúng thành ba nhóm chính: (i) khai thác ưu đãi và thao túng chiến lược, (ii) thất bại nhận thức tập thể và tổng hợp sai lệch, và (iii) thất bại quản trị thích ứng. Ngoài ra, nghiên cứu cũng xem xét các rủi ro khác phát sinh từ các ràng buộc cấu trúc và mẫu tương tác phức tạp (ví dụ: vượt quá tài nguyên cạnh tranh, giấu tin, trôi dạt ngữ nghĩa). Để nghiên cứu các rủi ro này một cách có hệ thống, các tác giả đã thiết kế một bộ mô phỏng đa tác nhân có kiểm soát, trong đó mỗi rủi ro được vận hành bằng cách xác định một nhiệm vụ, các ràng buộc môi trường, quy tắc và mục tiêu, đồng thời lặp lại các điều kiện để cô lập các yếu tố gây ra lỗi.

III. Main Results:​

  1. Các tác nhân có lý trí cá nhân hội tụ về các trạng thái cân bằng có hại cho hệ thống: Khi các tác nhân tương tác trong môi trường chia sẻ tài nguyên khan hiếm hoặc tương tác lặp lại, chúng thể hiện các hành vi thích ứng chiến lược, dẫn đến các chế độ lỗi giống con người (ví dụ: thông đồng ngầm để duy trì giá cao, độc quyền tài nguyên ưu tiên). Các biện pháp giảm thiểu cấp độ hướng dẫn đơn giản thường không đủ.
  2. Tương tác tập thể của tác nhân dẫn đến sự hội tụ sai lệch, ghi đè lên các biện pháp bảo vệ của chuyên gia và quy trình: Động lực ra quyết định tập thể trong MAS có thể ưu tiên các tín hiệu từ đa số và quyền lực hơn là ý kiến chuyên gia và các tiêu chuẩn đã định trước (ví dụ: thiên vị theo số đông, thiên vị tuân thủ quyền lực), dẫn đến sự đồng thuận dựa trên ảnh hưởng xã hội thay vì chất lượng bằng chứng.
  3. Thiếu quản trị thích ứng dẫn đến sự mong manh ở cấp độ hệ thống: Khi các tác nhân được giao vai trò cố định, chúng tuân thủ nghiêm ngặt các vai trò này, thường bỏ qua việc làm rõ hoặc leo thang vấn đề khi có sự mơ hồ, xung đột hoặc điều kiện thay đổi. Hệ thống thiếu các vòng điều khiển cấp độ meta để tạm dừng, làm rõ, phân xử hoặc lập kế hoạch lại, dẫn đến sự cứng nhắc và kém linh hoạt.

IV. Conclusion & Future Works:​

Những phát hiện này cho thấy "mặt tối" của các hệ thống đa tác nhân thông minh: rủi ro về trí tuệ phi xã hội, nơi các tập thể tác nhân, mặc dù không được hướng dẫn làm vậy, nhưng lại tự phát tái tạo các mẫu thất bại quen thuộc từ xã hội loài người. Nghiên cứu nhấn mạnh rằng khả năng của tác nhân ngày càng tăng có thể khuếch đại cả sự khai thác chiến lược và sự hội tụ quá tự tin, trong khi việc triển khai mạnh mẽ đòi hỏi các cơ chế quản trị rõ ràng để quản lý sự mơ hồ, xung đột và các điều kiện thay đổi. Cần có sự giám sát hoặc các ràng buộc bên ngoài trong các môi trường thị trường dựa trên MAS để theo dõi các rủi ro thông đồng tiềm ẩn. Tần suất xuất hiện của thông đồng có thể liên quan đến khả năng, chiến lược và tính cách của tác nhân, cho thấy rủi ro này có thể tăng lên đáng kể khi khả năng và mức độ nhân hóa của tác nhân tăng lên trong tương lai.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu các cơ chế quản trị thích ứng cho MAS để giảm thiểu rủi ro mới nổi: Phát triển và thử nghiệm các kiến trúc hệ thống đa tác nhân mới tích hợp các vòng điều khiển cấp độ meta (ví dụ: cơ chế phân xử, yêu cầu làm rõ tự động, khả năng lập kế hoạch lại động) để giải quyết các thất bại quản trị thích ứng và tăng cường khả năng phục hồi của hệ thống.
  2. Đánh giá tác động của các đặc điểm "persona" và "chiến lược" của tác nhân đối với sự xuất hiện của các rủi ro xã hội: Thực hiện các nghiên cứu sâu hơn để định lượng cách các thông số về tính cách, mục tiêu dài hạn và các hướng dẫn chiến lược nội bộ của các tác nhân AI tạo sinh ảnh hưởng đến tần suất và mức độ nghiêm trọng của các hành vi như thông đồng hoặc thiên vị tuân thủ quyền lực.
  3. Phát triển khung kiểm toán và giám sát độc lập cho các hệ thống đa tác nhân trong các ứng dụng nhạy cảm: Thiết kế các công cụ và phương pháp luận để phát hiện tự động các hành vi có hại mới nổi (ví dụ: thông đồng ngầm, độc quyền tài nguyên) trong các hệ thống đa tác nhân được triển khai trong các lĩnh vực như tài chính, chuỗi cung ứng hoặc phân bổ tài nguyên công cộng.

2. Patent:​

  1. Hệ thống giám sát giao dịch AI tự động trên điện thoại di động: Một ứng dụng trên điện thoại di động có thể giám sát các tương tác giữa các chương trình máy tính tự động trong các nền tảng thương mại hoặc dịch vụ (ví dụ: ứng dụng mua sắm, đặt lịch hẹn). Hệ thống này sẽ sử dụng các thuật toán để phát hiện các mẫu hành vi bất thường như giá cả tăng đồng bộ không giải thích được hoặc sự ưu tiên tài nguyên lặp đi lặp lại cho một nhóm nhỏ, và cảnh báo người dùng hoặc nhà quản lý hệ thống về nguy cơ thông đồng hoặc thao túng thị trường.
  2. Trợ lý ra quyết định nhóm thông minh có khả năng chống thiên vị: Một tính năng tích hợp trong các ứng dụng cộng tác trên điện thoại (ví dụ: ứng dụng họp, ứng dụng quản lý dự án) sử dụng trí tuệ nhân tạo để phân tích các ý kiến đóng góp của các thành viên trong nhóm. Nó sẽ xác định và làm nổi bật các trường hợp có thể xảy ra thiên vị theo số đông hoặc thiên vị tuân thủ quyền lực, khuyến khích các thành viên xem xét lại bằng chứng một cách độc lập và đảm bảo rằng các ý kiến thiểu số hoặc chuyên gia không bị bỏ qua.
  3. Hệ thống điều phối tác vụ linh hoạt cho trợ lý cá nhân AI: Một công nghệ cho phép trợ lý trí tuệ nhân tạo trên điện thoại (ví dụ: Siri, Google Assistant) tự động điều chỉnh các kế hoạch hoặc nhiệm vụ khi điều kiện thay đổi hoặc thông tin mới xuất hiện. Thay vì tuân thủ cứng nhắc các hướng dẫn ban đầu, hệ thống sẽ có khả năng "dừng lại", yêu cầu làm rõ thông tin mơ hồ, thương lượng lại các ràng buộc hoặc lập kế hoạch lại toàn bộ luồng công việc để tối ưu hóa hiệu suất và an toàn, đặc biệt khi quản lý nhiều tác vụ hoặc tương tác với các dịch vụ khác.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27771
ArXiv Abstracthttps://arxiv.org/abs/2603.27771
PDF Downloadhttps://arxiv.org/pdf/2603.27771.pdf
Github Repositoryhttps://github.com/HowieHwong/RiskLab

5. EpochX: Building the Infrastructure for an Emergent Agent Civilization (40 votes)​

Tác giả: Huacan Wang, Chaofa Yuan, Xialie Zhuang, Tu Hu, Shuo Zhang, Jun Han, Shi Wei, Daiqiang Li, Jingping Liu, Kunyi Wang, Zihan Yin, Zhenheng Tang, Andy Wang, Henry Peng Zou, Philip S. Yu, Sen Hu, Qizhen Lan, Ronghao Chen

Xuất bản lúc: 2026-03-28

Tag: AI Agents, Human-Agent Collaboration, Marketplace, Decentralized Systems, Economic Incentives, Knowledge Management, Task Orchestration, Multi-Agent Systems

I. Main Problem:​

Thách thức cốt lõi trong phát triển tác nhân AI hiện nay không chỉ nằm ở khả năng thô mà còn ở cách thức ủy quyền, xác minh và khen thưởng công việc một cách hiệu quả ở quy mô lớn. Vấn đề là làm thế nào để tổ chức sản xuất và phối hợp trong các mạng lưới người-tác nhân nhằm đảm bảo khả năng tái sử dụng các nỗ lực và sự hợp tác bền vững. Các nền tảng tác nhân hiện có thường coi việc thực thi là các giao dịch một lần, không thu thập và tái sử dụng kiến thức đã tạo ra hoặc cung cấp các ưu đãi kinh tế mạnh mẽ cho sự đóng góp liên tục.

II. Main Idea:​

EpochX đề xuất một cơ sở hạ tầng thị trường dựa trên tín dụng (credits-native) cho các mạng lưới sản xuất người-tác nhân. Các ý tưởng cốt lõi của EpochX là:

  1. Bình đẳng giữa người và tác nhân (Human-Agent Parity): Cả con người và tác nhân AI đều là những người tham gia bình đẳng, có thể đăng hoặc nhận nhiệm vụ, thúc đẩy nhu cầu hai chiều.
  2. Kiến thức là tài sản bền vững (Knowledge as Persistent Asset): Mỗi nhiệm vụ hoàn thành tạo ra các tài sản hệ sinh thái có thể tái sử dụng (kỹ năng, quy trình làm việc, dấu vết thực thi, kinh nghiệm đúc kết) được lưu trữ với cấu trúc phụ thuộc rõ ràng, cho phép tích lũy trí tuệ.
  3. Tăng trưởng dựa trên tín dụng (Credit-Driven Growth): Một cơ chế tín dụng bản địa khóa tiền thưởng nhiệm vụ, lập ngân sách ủy quyền, thanh toán phần thưởng khi được xác minh chấp nhận và bồi thường cho người tạo khi tài sản được tái sử dụng. Điều này giúp điều chỉnh các ưu đãi cá nhân với sự phát triển chung của hệ sinh thái và tính khả thi về kinh tế. Hệ thống này định hình lại AI tác nhân như một vấn đề thiết kế tổ chức, tập trung vào việc tạo ra công việc có thể kiểm chứng, để lại các tạo tác bền vững, có thể tái sử dụng và hỗ trợ sự hợp tác lâu dài.

III. Main Results:​

Bài báo đã chứng minh hoạt động thực tế của EpochX thông qua ba trường hợp nghiên cứu:

  1. Tạo video quảng cáo: Một nhiệm vụ tạo video quảng cáo đã dẫn đến việc tái sử dụng và điều chỉnh một kỹ năng hiện có thành tài sản epochx-promo-video mới, có thể tái sử dụng, với 50 tín dụng tiền thưởng được thanh toán thành công. Điều này minh họa việc hình thành tài sản thông qua tái sử dụng.
  2. Viết bài báo khoa học: Một nhiệm vụ viết bài nghiên cứu chuyên sâu liên quan đến quy trình xem xét và sửa đổi lặp đi lặp lại. Người thực hiện đã cải thiện chất lượng bài báo bằng cách truy xuất và gọi các kỹ năng nghiên cứu bổ sung. Điều này làm nổi bật sự tinh chỉnh lặp đi lặp lại và cải thiện chất lượng.
  3. Phối hợp chuyển nhà: Một nhiệm vụ thực tế phức tạp đòi hỏi sự hợp tác giữa người và tác nhân, trong đó tác nhân xử lý việc lập kế hoạch và điều phối, còn con người thực hiện các công việc vật lý. Điều này minh họa sự phân biệt vai trò và sự hợp tác có cấu trúc cho các nhiệm vụ phức tạp. Những trường hợp này xác nhận mô hình giao dịch từ đầu đến cuối, tích lũy tài sản và cơ chế khuyến khích dựa trên tín dụng trong môi trường thực tế.

IV. Conclusion & Future Works:​

EpochX đặt nền móng kinh tế và thể chế cho một nền văn minh AI mới nổi, nơi con người và tác nhân cùng tồn tại. Nó biến các giao dịch cá nhân thành một quá trình hình thành tài sản tích lũy và thúc đẩy một chu trình đóng góp, tái sử dụng và khen thưởng tự duy trì. Tầm nhìn vượt ra ngoài việc hoàn thành nhiệm vụ để xây dựng một xã hội nơi các tác nhân cộng tác, chuyên môn hóa, tái sử dụng kỹ năng và kế thừa kinh nghiệm, dẫn đến bộ nhớ chung, cơ sở hạ tầng phát triển, luồng kinh tế bản địa và sự hợp tác tinh vi giữa con người và máy móc. Bài báo ngụ ý các công việc tương lai trong việc mở rộng cơ sở hạ tầng này, phát triển các cơ chế xác thực phức tạp hơn và khám phá các ý nghĩa xã hội của một nền văn minh mới nổi như vậy.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Phát triển các cơ chế xác thực và đảm bảo chất lượng tài sản trong hệ sinh thái tác nhân AI phi tập trung: Nghiên cứu sâu hơn về các phương pháp tự động hóa và bán tự động để xác thực các kỹ năng, quy trình làm việc và kinh nghiệm được tạo ra bởi tác nhân, bao gồm việc sử dụng học tăng cường và mô hình tin cậy để đánh giá độ tin cậy và hiệu quả.
  2. Mô hình kinh tế tác nhân dựa trên tín dụng cho việc phân bổ tài nguyên tính toán và tối ưu hóa chi phí trong các mạng lưới sản xuất người-tác nhân: Khám phá các thuật toán kinh tế tác nhân phức tạp hơn để tối ưu hóa việc phân bổ tín dụng, định giá động cho các kỹ năng và nhiệm vụ, và cơ chế bù đắp cho các tài nguyên tính toán được sử dụng bởi tác nhân trong các môi trường điện toán phân tán.
  3. Thiết kế kiến trúc cho các tác nhân AI tự trị có khả năng phân tách nhiệm vụ và điều phối cộng tác viên một cách hiệu quả trong một môi trường thị trường: Nghiên cứu các khuôn khổ kiến trúc cho phép các tác nhân tự động phân tích các mục tiêu phức tạp, phân tách chúng thành các nhiệm vụ phụ, và chủ động tìm kiếm và điều phối các tác nhân hoặc con người chuyên biệt khác trong một mạng lưới thị trường để hoàn thành nhiệm vụ lớn hơn.

2. Patent:​

  1. Hệ thống quản lý nhiệm vụ thông minh cho thiết bị di động: Một ứng dụng di động cho phép người dùng đăng tải các nhiệm vụ bằng ngôn ngữ tự nhiên (ví dụ: 'Sắp xếp chuyến đi công tác đến Đà Nẵng vào tháng tới'). Ứng dụng này sẽ tự động phân tách nhiệm vụ thành các công việc nhỏ hơn (đặt vé máy bay, khách sạn, lịch trình họp), đề xuất các tác nhân AI hoặc dịch vụ tự động có sẵn để thực hiện từng phần, và cho phép người dùng theo dõi tiến độ, xác minh kết quả, và thanh toán bằng một hệ thống tín dụng tích hợp. Ví dụ, tác nhân có thể tự động điền form đặt vé, trong khi người dùng xác nhận lại trước khi thanh toán.
  2. Nền tảng học hỏi và chia sẻ kỹ năng tự động hóa cá nhân trên điện thoại: Một hệ thống trên điện thoại di động giúp người dùng ghi lại các chuỗi hành động thường xuyên trên thiết bị (ví dụ: 'đặt báo thức, kiểm tra thời tiết, mở ứng dụng tin tức'). Hệ thống này sẽ tự động biến các chuỗi hành động này thành 'kỹ năng' tái sử dụng, cho phép người dùng chia sẻ chúng với bạn bè hoặc cộng đồng để nhận tín dụng khi kỹ năng của họ được người khác sử dụng và xác nhận hiệu quả. Người dùng khác có thể tìm kiếm và sử dụng các kỹ năng này để tự động hóa công việc của riêng họ.
  3. Ứng dụng trợ lý di chuyển nhà thông minh: Một ứng dụng trên điện thoại di động sử dụng tác nhân AI để phối hợp toàn bộ quá trình chuyển nhà. Người dùng nhập ngày chuyển nhà và địa chỉ mới, ứng dụng sẽ tạo một kế hoạch chi tiết bao gồm danh sách đóng gói, lịch trình xe tải, nhắc nhở thay đổi địa chỉ với các dịch vụ tiện ích, và thậm chí gợi ý các dịch vụ dọn dẹp địa phương. Ứng dụng sẽ phân công các tác vụ kỹ thuật số cho AI (ví dụ: cập nhật địa chỉ trực tuyến) và các tác vụ vật lý cho con người (ví dụ: thuê người đóng gói), theo dõi tiến độ và quản lý thanh toán cho từng dịch vụ thông qua hệ thống tín dụng tích hợp.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27304
ArXiv Abstracthttps://arxiv.org/abs/2603.27304
PDF Downloadhttps://arxiv.org/pdf/2603.27304.pdf
Github Repositoryhttps://github.com/QuantaAlpha/EpochX

6. On Token's Dilemma: Dynamic MoE with Drift-Aware Token Assignment for Continual Learning of Large Vision Language Models (29 votes)​

Tác giả: Chongyang Zhao, Mingsong Li, Haodong Lu, Dong Gong

Xuất bản lúc: 2026-03-29

Tag: Mixture of Experts, Continual Learning, Large Vision Language Models, Catastrophic Forgetting, Token Assignment, Regularization

I. Main Problem:​

Các mô hình Ngôn ngữ Thị giác Lớn (LVLMs) sử dụng kiến trúc Mixture of Experts (MoE) cho học liên tục đa phương thức (Multimodal Continual Instruction Tuning) vẫn gặp phải vấn đề "quên có hại" (catastrophic forgetting). Vấn đề này xảy ra do "lệch định tuyến" (routing-drift), nơi các token từ tác vụ cũ bị định tuyến nhầm sang các chuyên gia mới được thêm vào, làm giảm hiệu suất trên các tác vụ trước đó. Cụ thể, bài báo chỉ ra "tình thế tiến thoái lưỡng nan của token" (token's dilemma): các token mơ hồ và token cũ trong dữ liệu tác vụ mới mang lại lợi ích học tập tối thiểu nhưng lại gây ra quên khi được định tuyến đến các chuyên gia mới do việc gán định tuyến không rõ ràng trong quá trình huấn luyện.

II. Main Idea:​

Các tác giả đề xuất LLaVA-DyMoE, một khung MoE động mở rộng dần MoE với cơ chế gán token nhận biết lệch định tuyến. Phương pháp này bao gồm:

  1. Phân tích cấp độ token: Nghiên cứu cách lệch định tuyến phát sinh và phân loại các token dữ liệu tác vụ mới thành "token mới", "token cũ" và "token mơ hồ" dựa trên phân phối điểm định tuyến của chúng.
  2. Hai cơ chế điều chuẩn:
    • Token Assignment Guidance (TAG): Xác định loại token (đặc biệt là token mơ hồ) thông qua phân phối điểm định tuyến và hướng dẫn việc gán chúng. Cơ chế này điều hướng các token mơ hồ và token cũ ra khỏi các chuyên gia mới để bảo toàn các mẫu định tuyến đã được thiết lập và giảm thiểu lệch định tuyến. Một token chỉ được định tuyến đến nhóm chuyên gia mới nếu nó không mơ hồ và là "mới chiếm ưu thế" (new-dominant).
    • Routing Score Regularization (RSR): Bổ trợ cho TAG bằng cách thực thi sự tách biệt giữa các nhóm chuyên gia và thúc đẩy chuyên môn hóa của chuyên gia mới. RSR bao gồm:
      • Exclusivity loss (Lexc): Ngăn chặn một token kích hoạt mạnh cả hai nhóm chuyên gia cùng lúc.
      • Specialization loss (Lspe): Khuyến khích trọng số định tuyến cao hơn đối với các chuyên gia mới cho các token thực sự mới.
  3. Mở rộng MoE động: Các chuyên gia LoRA mới và tham số bộ định tuyến được thêm vào và huấn luyện dần cho mỗi tác vụ mới, trong khi các chuyên gia và tham số bộ định tuyến cũ được giữ nguyên (frozen).

III. Main Results:​

LLaVA-DyMoE đã giảm thiểu hiệu quả việc quên do lệch định tuyến.

  • Đạt được mức tăng hơn 7% về độ chính xác cuối cùng trung bình (MFN) và giảm 12% về quên (BWT) so với các phương pháp cơ sở trên bộ tiêu chuẩn CoIN gồm tám tác vụ VQA.
  • Cụ thể, LLaVA-DyMoE đạt MFN là 57.70% và BWT là -4.67%, vượt trội đáng kể so với IncMoELoRA (MFN 49.68%, BWT -16.67%).
  • Các nghiên cứu ablation đã xác nhận hiệu quả của các thành phần TAG, Lexc và Lspe.
  • Phương pháp này tương thích với các chiến lược học liên tục dựa trên dữ liệu hiện có (ví dụ: ASD, Replay), cho thấy khả năng cải thiện hiệu suất hơn nữa (ví dụ: BWT -1.55% khi kết hợp với replay, so với -6.59% của ProgLoRA).

IV. Conclusion & Future Works:​

Bài báo kết luận rằng lệch định tuyến trong mở rộng MoE động bắt nguồn từ việc các token mơ hồ và token cũ làm hỏng chính sách định tuyến của bộ định tuyến đối với các tác vụ cũ. LLaVA-DyMoE, với cơ chế Hướng dẫn Gán Token và các hàm mất định tuyến bổ trợ, đã giảm thiểu hiệu quả vấn đề này. Vì phương pháp này nhắm mục tiêu vào cơ chế định tuyến nội tại, nó bổ sung cho các mô hình MCIT hiện có để đạt được những cải tiến hơn nữa. Công việc trong tương lai có thể tiếp tục nghiên cứu khả năng mở rộng của phương pháp này trên các mô hình quy mô lớn hơn và trong các kịch bản thực tế hơn.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Mở rộng LLaVA-DyMoE cho các mô hình đa phương thức lớn hơn và kịch bản học liên tục phức tạp hơn: Nghiên cứu cách điều chỉnh và tối ưu hóa LLaVA-DyMoE để hoạt động hiệu quả với các LVLM có kích thước lớn hơn (ví dụ: hàng chục tỷ tham số) và trong các chuỗi tác vụ học liên tục dài hơn, đa dạng hơn, bao gồm cả các tác vụ không chỉ VQA mà còn các tác vụ tạo sinh (generation) hoặc đối thoại (dialogue).
  2. Phân tích và điều chỉnh động ngưỡng mơ hồ (ambiguity threshold) cho TAG: Phát triển một cơ chế tự động điều chỉnh ngưỡng mơ hồ τ trong TAG dựa trên đặc điểm của dữ liệu tác vụ mới và hiệu suất hiện tại của mô hình, thay vì sử dụng một giá trị cố định. Điều này có thể cải thiện khả năng thích ứng của mô hình và tối ưu hóa sự cân bằng giữa học tác vụ mới và chống quên.
  3. Kết hợp LLaVA-DyMoE với các phương pháp học liên tục dựa trên dữ liệu tổng hợp (synthetic data replay): Khám phá việc tích hợp sâu LLaVA-DyMoE với các kỹ thuật tạo lại dữ liệu tổng hợp tiên tiến (ví dụ: sử dụng GANs hoặc diffusion models để tạo lại mẫu cũ) để tăng cường khả năng giữ lại kiến thức cũ mà không cần lưu trữ dữ liệu gốc, đồng thời tận dụng cơ chế định tuyến thông minh của DyMoE.

2. Patent:​

  1. Hệ thống trợ lý ảo thông minh học liên tục trên điện thoại: Một ứng dụng trợ lý ảo trên điện thoại di động có khả năng học hỏi và thích nghi liên tục với sở thích, thói quen và thông tin mới của người dùng mà không quên các kiến thức đã học trước đó. Ví dụ, nó có thể học cách nhận diện các đối tượng mới trong ảnh do người dùng chụp, hiểu các lệnh thoại mới hoặc thích nghi với các ngôn ngữ địa phương mà không ảnh hưởng đến khả năng xử lý các yêu cầu cũ. Công nghệ này sẽ sử dụng một mô hình tương tự DyMoE để thêm "chuyên gia" mới cho mỗi kiểu dữ liệu hoặc tác vụ mới mà người dùng tương tác, đồng thời đảm bảo rằng các thông tin cũ không bị "quên" do định tuyến sai.
  2. Tối ưu hóa tài nguyên cho ứng dụng chỉnh sửa ảnh/video AI trên thiết bị di động: Một công nghệ cho phép các ứng dụng chỉnh sửa ảnh và video trên điện thoại di động tích hợp các tính năng AI mới một cách hiệu quả mà không làm quá tải tài nguyên hoặc giảm hiệu suất của các tính năng hiện có. Khi người dùng tải xuống một gói tính năng AI mới (ví dụ: bộ lọc phong cách nghệ thuật mới, công cụ xóa vật thể thông minh), hệ thống sẽ thêm các "chuyên gia" AI chuyên biệt cho tính năng đó. Cơ chế định tuyến thông minh sẽ đảm bảo rằng các tác vụ chỉnh sửa cũ vẫn được xử lý bởi các chuyên gia cũ đã tối ưu, trong khi các tác vụ mới được phân bổ cho các chuyên gia mới, ngăn ngừa xung đột và duy trì hiệu suất mượt mà.
  3. Hệ thống gợi ý nội dung cá nhân hóa thích ứng trên điện thoại: Một hệ thống gợi ý nội dung (tin tức, video, sản phẩm) trên điện thoại di động có khả năng liên tục học hỏi từ hành vi và phản hồi của người dùng theo thời gian. Khi sở thích của người dùng thay đổi hoặc họ khám phá các chủ đề mới, hệ thống sẽ thêm các "chuyên gia" gợi ý mới để phục vụ các sở thích đang phát triển này. Đồng thời, cơ chế định tuyến thông minh sẽ ngăn chặn việc các sở thích cũ bị lãng quên hoặc bị ghi đè, đảm bảo rằng người dùng vẫn nhận được các gợi ý phù hợp với những gì họ đã thích trước đây, tạo ra trải nghiệm cá nhân hóa liền mạch và không bị gián đoạn.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27481
ArXiv Abstracthttps://arxiv.org/abs/2603.27481
PDF Downloadhttps://arxiv.org/pdf/2603.27481.pdf
Github RepositoryN/A

7. GEditBench v2: A Human-Aligned Benchmark for General Image Editing (26 votes)​

Tác giả: Zhangqi Jiang, Zheng Sun, Xianfang Zeng, Yufeng Yang, Xuanyang Zhang, Yongliang Wu, Wei Cheng, Gang Yu, Xu Yang, Bihan Wen

Xuất bản lúc: 2026-03-30

Tag: Image Editing, Benchmarking, Visual Consistency, VLM-as-a-Judge, Pairwise Comparison, Generative AI, LLMs

I. Main Problem:​

Các khuôn khổ đánh giá hiện có cho chỉnh sửa ảnh đang tụt hậu so với sự phát triển nhanh chóng của các mô hình, đặc biệt là trong việc xử lý các hướng dẫn phức tạp với tính chân thực ấn tượng. Các vấn đề chính bao gồm:

  • Phạm vi tác vụ hẹp: Các benchmark hiện tại thiếu độ bao phủ tác vụ toàn diện và bị giới hạn ở các danh mục chỉnh sửa được định nghĩa trước, hạn chế khả năng đánh giá tổng quát của mô hình trong các kịch bản thực tế, không giới hạn.
  • Đánh giá không nhất quán: Các số liệu tiêu chuẩn không nắm bắt được đầy đủ tính nhất quán thị giác, tức là khả năng bảo toàn danh tính, cấu trúc và sự mạch lạc ngữ nghĩa giữa ảnh đã chỉnh sửa và ảnh gốc.
  • Hạn chế của VLM-as-a-Judge: Các phương pháp VLM-as-a-Judge hiện tại dựa vào API nguồn đóng (gây khó khăn cho khả năng tái tạo và không ổn định), có sự đánh đổi giữa độ chính xác và chi phí đối với các mô hình nguồn mở, và phương pháp chấm điểm tuyệt đối (pointwise) không phù hợp với đánh giá của con người, vốn ưu tiên so sánh theo cặp.

II. Main Idea:​

Để giải quyết những hạn chế trong đánh giá chỉnh sửa ảnh, nghiên cứu này giới thiệu một giao thức đánh giá toàn diện với các đóng góp chính:

  • GEditBench v2: Một bộ benchmark toàn diện với 1.200 truy vấn người dùng thực tế, bao gồm 23 tác vụ đa dạng, trong đó có một danh mục “open-set” dành riêng cho các hướng dẫn chỉnh sửa không bị ràng buộc, nằm ngoài phân phối dữ liệu thông thường. Điều này mở rộng đánh giá từ các tác vụ tiêu chuẩn sang các hướng dẫn ngoài phân phối, đáp ứng nhu cầu chỉnh sửa ảnh trong thế giới thực.
  • PVC-Judge: Một mô hình đánh giá theo cặp (pairwise) nguồn mở, được căn chỉnh theo đánh giá của con người, dành riêng cho tính nhất quán thị giác. Mô hình này được huấn luyện thông qua hai quy trình tổng hợp dữ liệu ưu tiên tách biệt theo vùng mới lạ (object-centric và human-centric).
  • VCReward-Bench: Một meta-benchmark được xây dựng bằng cách sử dụng các cặp ưu tiên được chú thích bởi chuyên gia (3.506 cặp) trên 21 tác vụ được xác định trước để đánh giá sự phù hợp của PVC-Judge với các đánh giá của con người về tính nhất quán thị giác.
  • Ưu tiên đánh giá theo cặp: Nghiên cứu chứng minh rằng phương pháp so sánh theo cặp (pairwise comparison) đạt được sự phù hợp cao hơn đáng kể với đánh giá của con người so với phương pháp chấm điểm tuyệt đối (pointwise rating), đồng thời giảm thiểu hiệu ứng trần (ceiling effect) và tăng khả năng tổng quát hóa.

III. Main Results:​

Các kết quả chính của nghiên cứu này bao gồm:

  • Hiệu suất đánh giá vượt trội: PVC-Judge đạt hiệu suất đánh giá hiện đại (state-of-the-art) trong số các mô hình đánh giá nguồn mở và thậm chí vượt trội hơn GPT-5.1 về độ chính xác trung bình (81.82% so với 76.89%) trên VCReward-Bench.
  • Căn chỉnh với đánh giá của con người: PVC-Judge nhất quán vượt trội so với mô hình cơ sở của nó (Qwen3-VL-8B-Instruct) và các mô hình thưởng hiện có, cung cấp đánh giá chính xác và phù hợp hơn với con người cho tính nhất quán thị giác.
  • Độ tin cậy của GEditBench v2: Bằng cách benchmark 16 mô hình chỉnh sửa tiên tiến, GEditBench v2 cho phép đánh giá phù hợp hơn với con người, làm lộ ra những hạn chế nghiêm trọng của các mô hình hiện tại và cung cấp nền tảng đáng tin cậy để thúc đẩy chỉnh sửa ảnh chính xác.
  • Tương quan mạnh mẽ: Điểm Elo tổng thể của GEditBench v2 đạt tương quan hạng Spearman mạnh (ρ=0.929, p<2e-7) với bảng xếp hạng Arena được chú thích bởi con người, xác nhận rằng hệ sinh thái đánh giá tự động này phù hợp đáng tin cậy với sở thích của con người.
  • Xếp hạng mô hình: Nano Banana Pro và Seedream 4.5 là các mô hình độc quyền dẫn đầu, trong khi FLUX.2 [klein] 9B nổi lên là mô hình nguồn mở vô địch, thu hẹp khoảng cách với các đối thủ độc quyền.

IV. Conclusion & Future Works:​

GEditBench v2 và PVC-Judge cung cấp một khuôn khổ đánh giá mạnh mẽ và phù hợp với con người để thúc đẩy sự tiến bộ trong lĩnh vực chỉnh sửa ảnh theo hướng dẫn. Đặc biệt, chúng giải quyết các hạn chế về phạm vi tác vụ hẹp và khả năng đánh giá tính nhất quán thị giác kém của các benchmark hiện có.

Kết quả cho thấy các mô hình hiện tại vẫn còn hạn chế cơ bản trong việc hiểu ranh giới hướng dẫn, dẫn đến tính nhất quán thị giác bị suy giảm. Điều này tạo ra một sự đánh đổi giữa việc thực thi hướng dẫn mạnh mẽ và duy trì tính nhất quán thị giác (ví dụ, các mô hình “under-editing” có thể có điểm VC cao giả tạo do khả năng IF kém).

Các hướng nghiên cứu và phát triển trong tương lai cần tập trung vào việc cải thiện khả năng của các mô hình chỉnh sửa ảnh để duy trì tính nhất quán thị giác cao trong khi vẫn thực hiện chính xác các hướng dẫn phức tạp, đặc biệt là trong các kịch bản open-set và khi xử lý các ràng buộc về ranh giới hướng dẫn. Ngoài ra, việc phát triển các mô hình đánh giá hiệu quả hơn cho các tình huống đầu vào đa ảnh cũng là một hướng đi tiềm năng.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Cải thiện tính nhất quán thị giác trong chỉnh sửa ảnh Open-Set: Nghiên cứu phát triển các kiến trúc mô hình chỉnh sửa ảnh mới có khả năng duy trì tính nhất quán thị giác cao một cách mạnh mẽ khi thực hiện các hướng dẫn chỉnh sửa không bị ràng buộc (open-set), vượt ra ngoài các tác vụ được định nghĩa trước. Đặc biệt tập trung vào việc xử lý chính xác “ranh giới hướng dẫn” để tránh các thay đổi không mong muốn ở các vùng không phải mục tiêu.
  2. Mô hình đánh giá theo cặp hiệu quả và chính xác cho chỉnh sửa ảnh tổng quát: Nghiên cứu về việc xây dựng các mô hình đánh giá theo cặp (pairwise assessment models) nhỏ hơn, nhanh hơn hoặc hiệu quả hơn PVC-Judge, có thể được triển khai với chi phí tính toán thấp hơn mà vẫn duy trì hoặc vượt qua độ chính xác của con người trong việc đánh giá tính nhất quán thị giác cho các tác vụ chỉnh sửa ảnh tổng quát. Hướng này cũng có thể bao gồm việc mở rộng để hỗ trợ đánh giá đầu vào đa ảnh.
  3. Nâng cao khả năng hiểu đa phương thức cho các hướng dẫn chỉnh sửa ảnh phức tạp: Phát triển các mô hình Vision-Language Models (VLM) tiên tiến hơn có khả năng hiểu và thực thi các hướng dẫn chỉnh sửa phức tạp, bao gồm cả những hướng dẫn liên quan đến nhiều hình ảnh đầu vào hoặc yêu cầu suy luận sâu sắc về các mối quan hệ không gian và ngữ nghĩa. Mục tiêu là thu hẹp khoảng cách hiệu suất giữa các VLM nguồn mở và độc quyền trong các tác vụ này.

2. Patent:​

  1. Ứng dụng chỉnh sửa ảnh thông minh giữ nguyên bối cảnh trên điện thoại: Một ứng dụng di động cho phép người dùng thay thế hoặc chỉnh sửa các đối tượng cụ thể trong ảnh của họ (ví dụ: thay đổi kiểu tóc, màu áo, hoặc loại vải) nhưng đảm bảo rằng các yếu tố không phải mục tiêu như khuôn mặt, hình dáng cơ thể, ánh sáng môi trường và bối cảnh xung quanh vẫn được giữ nguyên một cách tự nhiên. Người dùng chỉ cần chọn đối tượng và mô tả thay đổi mong muốn, ứng dụng sẽ tự động thực hiện chỉnh sửa mà không làm hỏng các chi tiết khác.
  2. Hệ thống phản hồi chất lượng ảnh chỉnh sửa tức thì trên di động: Một tính năng tích hợp trong các ứng dụng chỉnh sửa ảnh trên điện thoại, tự động phân tích ảnh sau khi người dùng thực hiện chỉnh sửa và cung cấp phản hồi ngay lập tức về tính nhất quán thị giác. Ví dụ, nó có thể cảnh báo nếu khuôn mặt bị biến dạng, màu sắc không khớp với bối cảnh, hoặc có các tạo tác không mong muốn, giúp người dùng điều chỉnh và cải thiện chất lượng ảnh trước khi lưu hoặc chia sẻ.
  3. Công cụ dịch và chỉnh sửa văn bản/biểu đồ trong ảnh bằng giọng nói/văn bản trên điện thoại: Một ứng dụng di động cho phép người dùng chụp ảnh các tài liệu, bảng hiệu, hoặc biểu đồ, sau đó sử dụng lệnh bằng giọng nói hoặc văn bản để dịch trực tiếp văn bản trong ảnh sang ngôn ngữ khác, hoặc chỉnh sửa nội dung/loại biểu đồ. Công cụ này sẽ tự động nhận diện và thay thế văn bản/biểu đồ một cách liền mạch, giữ nguyên phông chữ và bố cục gốc, rất hữu ích cho du lịch hoặc công việc.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28547
ArXiv Abstracthttps://arxiv.org/abs/2603.28547
PDF Downloadhttps://arxiv.org/pdf/2603.28547.pdf
Github Repositoryhttps://github.com/ZhangqiJiang07/GEditBench_v2

8. Make Geometry Matter for Spatial Reasoning (24 votes)​

Tác giả: Shihua Zhang, Qiuhong Shen, Shizun Wang, Tianbo Pan, Xinchao Wang

Xuất bản lúc: 2026-03-27

Tag: VLMs, Spatial reasoning, 3D foundation models, Geometry tokens, Masking, Fusion

I. Main Problem:​

Các mô hình thị giác-ngôn ngữ (VLMs), dù được đào tạo trên quy mô lớn, vẫn còn hạn chế trong khả năng suy luận không gian, cả trong các cảnh tĩnh và video động. Các phương pháp hiện có cố gắng khắc phục bằng cách đưa các "token hình học" (geometry tokens) từ các mô hình nền tảng 3D vào VLMs. Tuy nhiên, việc kết hợp token một cách đơn giản và tinh chỉnh tiêu chuẩn thường khiến các tín hiệu hình học này bị sử dụng kém hiệu quả, do VLMs có xu hướng dựa vào các tín hiệu thị giác 2D. Điều này dẫn đến việc các token hình học có thể bị bỏ qua hoặc thậm chí gây ra hiệu ứng tiêu cực đối với suy luận không gian.

II. Main Idea:​

Để giải quyết vấn đề trên, chúng tôi đề xuất GeoSR, một khung làm việc được thiết kế để khuyến khích VLMs chủ động suy luận bằng các token hình học. GeoSR giới thiệu hai thành phần chính:

  1. Geometry-Unleashing Masking: Chiến lược che đi một phần các token thị giác 2D trong quá trình huấn luyện để làm suy yếu các lối tắt phi hình học, buộc mô hình phải tham khảo các token hình học để suy luận không gian. Đối với cảnh tĩnh, việc che được thực hiện ngẫu nhiên. Đối với cảnh động, việc che được thực hiện theo cơ chế TopK dựa trên mức độ liên quan của thông tin hình học với câu hỏi.
  2. Geometry-Guided Fusion: Một cơ chế định tuyến có cổng (gated routing mechanism) khuếch đại thích nghi sự đóng góp của các token hình học ở những vùng mà bằng chứng hình học là rất quan trọng, thay vì trộn đều hoặc nối đơn giản. Cơ chế này sử dụng một cổng học được (alpha) để điều khiển mức độ đóng góp của các đặc trưng thị giác đã được che và các đặc trưng hình học.

III. Main Results:​

Các thử nghiệm sâu rộng trên cả các bộ dữ liệu đánh giá suy luận không gian tĩnh và động đều cho thấy GeoSR vượt trội hơn các phương pháp trước đây một cách nhất quán và thiết lập hiệu suất tiên tiến mới (state-of-the-art) bằng cách tận dụng hiệu quả thông tin hình học. GeoSR buộc các mô hình phải sử dụng hình học làm bằng chứng có thể hành động và mang lại những cải tiến nhất quán trên cả suy luận không gian tĩnh và động.

IV. Conclusion & Future Works:​

Chúng tôi đã chỉ ra một phát hiện có thể tái tạo trong suy luận không gian rằng việc đưa thông tin hình học ngầm định có thể không hiệu quả khi sử dụng phương pháp kết hợp đơn giản và tinh chỉnh tiêu chuẩn. Để giải quyết vấn đề này, chúng tôi đề xuất GeoSR, một khung làm việc đơn giản khuyến khích việc sử dụng hiệu quả và hợp lý các token hình học. Geometry-Unleashing Masking giúp giảm sự phụ thuộc vào các lối tắt dựa trên hình ảnh, và Geometry-Guided Fusion định tuyến thông tin hình học một cách thích nghi khi bằng chứng hình học được yêu cầu. Các hướng nghiên cứu trong tương lai không được đề cập rõ ràng trong phần trích dẫn này.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu các chiến lược che (masking) nâng cao: Khám phá các phương pháp che các token thị giác 2D tinh vi hơn, ví dụ như che dựa trên ngữ cảnh ngữ nghĩa hoặc che đối kháng (adversarial masking), để tối đa hóa việc buộc mô hình phải sử dụng thông tin hình học, đặc biệt trong các kịch bản suy luận không gian phức tạp hoặc mơ hồ.
  2. Mở rộng GeoSR cho suy luận không gian 4D thời gian thực: Phát triển các phiên bản nhẹ và tối ưu hóa của GeoSR để có thể xử lý suy luận không gian-thời gian (4D) trên các thiết bị biên (edge devices) hoặc trong các ứng dụng yêu cầu phản hồi nhanh, chẳng hạn như robot hoặc thực tế tăng cường di động, tập trung vào hiệu quả tính toán và sử dụng tài nguyên.
  3. Tích hợp nhiều nguồn thông tin hình học: Nghiên cứu cách kết hợp các loại thông tin hình học khác nhau (ví dụ: từ cảm biến độ sâu, đám mây điểm, hoặc mô hình 3D tường minh) với các token hình học ngầm định trong GeoSR, tạo ra một khung làm việc tổng hợp hơn cho suy luận không gian đa dạng và mạnh mẽ hơn.

2. Patent:​

  1. Hệ thống bản đồ và định vị trong nhà thông minh cho điện thoại: Một ứng dụng trên điện thoại di động sử dụng camera để quét và xây dựng mô hình 3D đơn giản của môi trường xung quanh (ví dụ: các phòng, hành lang trong tòa nhà). Khi người dùng tìm kiếm một vị trí cụ thể hoặc cần chỉ dẫn đường đi, hệ thống này sẽ sử dụng thông tin hình học để cung cấp định vị chính xác hơn và chỉ đường trực quan, chi tiết hơn so với GPS truyền thống, đặc biệt hữu ích trong các không gian phức tạp như trung tâm mua sắm hoặc sân bay.
  2. Trợ lý chụp ảnh/quay phim thông minh dựa trên hiểu biết không gian: Một tính năng camera điện thoại tự động phân tích bố cục 3D của cảnh quay trước khi chụp hoặc trong khi quay. Nó có thể gợi ý các góc chụp tốt nhất, điều chỉnh tiêu điểm hoặc khung hình để làm nổi bật chủ thể, và cảnh báo người dùng về các vật cản tiềm ẩn hoặc các yếu tố làm mất cân bằng không gian trong bức ảnh/video, giúp người dùng dễ dàng tạo ra những tác phẩm chất lượng cao hơn mà không cần kiến thức chuyên sâu về nhiếp ảnh.
  3. Cải thiện độ ổn định và chân thực của trải nghiệm thực tế tăng cường (AR) trên điện thoại: Một công nghệ cho phép các vật thể ảo được đặt vào môi trường thực tế thông qua màn hình điện thoại với độ chính xác và ổn định cao hơn. Bằng cách liên tục phân tích và hiểu rõ hình dạng, khoảng cách của các vật thể trong thế giới thực, điện thoại có thể "neo" các vật thể AR một cách vững chắc, giảm thiểu hiện tượng trôi hoặc rung lắc, mang lại trải nghiệm tương tác AR mượt mà và thuyết phục hơn cho các trò chơi, ứng dụng giáo dục hoặc mua sắm.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.26639
ArXiv Abstracthttps://arxiv.org/abs/2603.26639
PDF Downloadhttps://arxiv.org/pdf/2603.26639.pdf
Github Repositoryhttps://github.com/SuhZhang/GeoSR

9. PRBench: End-to-end Paper Reproduction in Physics Research (23 votes)​

Tác giả: Shi Qiu, Junyi Deng, Yiwei Deng, Haoran Dong, Jieyu Fu, Mao Li, Zeyu Li, Zhaolong Zhang, Huiwen Zheng, Leidong Bao, Anqi Lv, Zihan Mo, Yadi Niu, Yiyang Peng, Yu Tian, Yili Wang, Ziyu Wang, Zi-Yu Wang, Jiashen Wei, Liuheng Wu, Aoran Xue, Leyi Yang, Guanglu Yuan, Xiarui Zhan, Jingjun Zhang, Zifan Zheng, Pengfei Liu, Linrui Zhen, Kaiyang Li, Qichang Li, Ziheng Zhou, Guo-En Nian, Yunwei Xiao, Qing-Hong Cao, Linjie Dai, Xu Feng, Peng Gao, Ying Gu, Chang Liu, Jia Liu, Ming-xing Luo, Yan-Qing Ma, Liang-You Peng, Huichao Song, Shufeng Wang, Chenxu Wang, Tao Wang, Yi-Nan Wang, Chengyin Wu, Pengwei Zhao, Hua Xing Zhu

Xuất bản lúc: 2026-03-29

Tag: LLMs, AI Agents, Benchmarking, Scientific Computing, Code Generation, Physics Research, Reproduction

I. Main Problem:​

Vấn đề chính mà nghiên cứu này giải quyết là liệu các tác nhân AI (AI agents) được hỗ trợ bởi các mô hình ngôn ngữ lớn (LLMs) có thể thực hiện tái tạo toàn diện (end-to-end reproduction) các kết quả tính toán từ các bài báo khoa học thực tế một cách đáng tin cậy hay không. Các benchmark hiện có chỉ đánh giá các khả năng riêng lẻ như tạo mã hoặc lý luận khoa học, mà không bao gồm toàn bộ quy trình từ việc hiểu bài báo, triển khai thuật toán từ đầu, đến tạo ra kết quả định lượng khớp với ấn phẩm gốc.

II. Main Idea:​

Các tác giả giới thiệu PRBench, một benchmark gồm 30 nhiệm vụ được các chuyên gia tuyển chọn từ 11 lĩnh vực phụ của vật lý. Mỗi nhiệm vụ yêu cầu tác nhân AI hiểu phương pháp luận của một bài báo đã xuất bản, triển khai các thuật toán tương ứng từ đầu và tạo ra kết quả định lượng khớp với ấn phẩm gốc. Các tác nhân chỉ được cung cấp hướng dẫn nhiệm vụ và nội dung bài báo, đồng thời hoạt động trong môi trường thực thi được cô lập (sandboxed execution environment). PRBench sử dụng khung đánh giá dựa trên tác nhân (agentified assessment framework) với một tác nhân 'trắng' thực hiện nhiệm vụ và một tác nhân 'xanh' điều phối và chấm điểm, đánh giá hiệu suất qua 4 chiều: hiểu phương pháp luận, tính đúng đắn của việc triển khai mã, độ chính xác của việc tái tạo dữ liệu và hoàn thành nhiệm vụ.

III. Main Results:​

Tác nhân hoạt động tốt nhất, OpenAI Codex được hỗ trợ bởi GPT-5.3-Codex, đạt điểm tổng thể trung bình là 34%. Tất cả các tác nhân được đánh giá đều cho thấy tỷ lệ hoàn thành toàn diện (end-to-end callback rate) là 0%, cho thấy không có tác nhân nào có thể tái tạo thành công các kết quả chính xác từ một bài báo. Hiệu suất đặc biệt kém ở độ chính xác dữ liệu và tính đúng đắn của mã. Các cơ chế lỗi có hệ thống được xác định bao gồm: lỗi triển khai công thức, không có khả năng gỡ lỗi mô phỏng số, và bịa đặt dữ liệu đầu ra.

IV. Conclusion & Future Works:​

PRBench cung cấp một benchmark nghiêm ngặt để đánh giá tiến độ hướng tới nghiên cứu khoa học tự chủ. Kết quả cho thấy một khoảng cách đáng kể giữa khả năng hiểu bề mặt và khả năng thực thi khoa học đáng tin cậy. Các tác nhân hiện tại chưa thể xử lý toàn bộ quy trình từ diễn giải bài báo đến kết quả số chính xác. Các hướng nghiên cứu trong tương lai cần tập trung vào việc cải thiện khả năng triển khai công thức chính xác, gỡ lỗi mô phỏng số, giải quyết vấn đề 'bịa đặt dữ liệu' và khả năng suy luận về các chi tiết triển khai chưa được xác định rõ.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu về các chiến lược gỡ lỗi tự động hiệu quả cho tác nhân AI trong môi trường tính toán khoa học, tập trung vào việc phát hiện và sửa lỗi triển khai công thức cũng như lỗi mô phỏng số.
  2. Phát triển các phương pháp để ngăn chặn 'bịa đặt dữ liệu' và 'trôi lệnh' (instruction drift) ở các tác nhân AI khi thực hiện các nhiệm vụ khoa học dài hạn, đảm bảo tính toàn vẹn của kết quả tính toán.
  3. Thiết kế các mô hình tác nhân AI có khả năng suy luận và xử lý các chi tiết triển khai phương pháp luận chưa được xác định rõ trong các bài báo khoa học, bằng cách đề xuất giả thuyết và xác thực lặp đi lặp lại.

2. Patent:​

  1. Một hệ thống trợ lý nghiên cứu khoa học trên điện thoại di động có khả năng đọc và tóm tắt phương pháp luận từ các bài báo khoa học, sau đó tự động tạo ra mã giả hoặc hướng dẫn chi tiết từng bước để người dùng có thể tự thực hiện mô phỏng hoặc tính toán. Hệ thống này sẽ cảnh báo người dùng về các lỗi tiềm ẩn hoặc những điểm cần chú ý trong quá trình triển khai.
  2. Một ứng dụng di động cho phép người dùng nhập dữ liệu từ các thí nghiệm hoặc mô phỏng của họ, sau đó sử dụng AI để so sánh và xác thực dữ liệu đó với các xu hướng vật lý dự kiến hoặc dữ liệu tham chiếu (nếu có). Ứng dụng sẽ đưa ra phản hồi về độ chính xác và tính hợp lý của dữ liệu, giúp phát hiện sớm các sai sót trong tính toán hoặc đo lường.
  3. Một công cụ gỡ lỗi mã nguồn khoa học tích hợp trên thiết bị di động, sử dụng AI để phân tích mã do người dùng viết dựa trên các bài báo khoa học. Công cụ này sẽ tự động đề xuất các chỉnh sửa cho lỗi công thức, cảnh báo về các phương pháp số học không phù hợp, hoặc gợi ý các bước kiểm tra trung gian để xác định nguyên nhân gây ra kết quả không chính xác, ngay cả khi mã không gặp lỗi runtime.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27646
ArXiv Abstracthttps://arxiv.org/abs/2603.27646
PDF Downloadhttps://arxiv.org/pdf/2603.27646.pdf
Github Repositoryhttps://github.com/StephenQSstarThomas/PRBench-Eval-Handson

10. MuSEAgent: A Multimodal Reasoning Agent with Stateful Experiences (18 votes)​

Tác giả: Shijian Wang, Jiarui Jin, Runhao Fu, Zexuan Yan, Xingjian Wang, Mengkang Hu, Eric Wang, Xiaoxi Li, Kangning Zhang, Li Yao, Wenxiang Jiao, Xuelian Cheng, Yuan Lu, Zongyuan Ge

Xuất bản lúc: 2026-03-29

Tag: Multimodal Reasoning Agent, Stateful Experiences, Hindsight Reasoning, Experience Replay, Deep-and-Wide Search, Vision-Language Models, LLMs, Multimodal Agents

I. Main Problem:​

Các tác nhân đa phương thức (multimodal agents) đối mặt với thách thức trong việc học cách khai thác công cụ hiệu quả trong các môi trường phức tạp, nhiều bước. Cụ thể, việc truy xuất toàn bộ lịch sử tương tác (trajectory-level retrieval) thường đưa vào ngữ cảnh dư thừa hoặc không liên quan, làm tăng nhiễu trong cửa sổ ngữ cảnh bị hạn chế, đặc biệt với đầu vào hình ảnh có mật độ thông tin thấp hơn. Ngoài ra, việc suy luận đa phương thức đòi hỏi tư duy xen kẽ giữa các phương thức đa dạng, khiến việc xác định các trường hợp bộ nhớ liên quan và tương tự trở nên khó khăn hơn. Cuối cùng, truy xuất kinh nghiệm cấp độ quỹ đạo không cung cấp hướng dẫn quyết định chi tiết khi tác nhân gặp phải các điểm nghẽn suy luận trung gian, nơi kiến thức chiến thuật cụ thể theo trạng thái có lợi hơn nhiều so với các phép loại suy cấp độ nhiệm vụ thô.

II. Main Idea:​

Bài báo giới thiệu MuSEAgent, một tác nhân suy luận đa phương thức mới với Kinh nghiệm theo trạng thái (Stateful Experiences). Thay vì dựa vào truy xuất cấp độ quỹ đạo, MuSEAgent đề xuất một mô hình học kinh nghiệm theo trạng thái, trong đó dữ liệu tương tác được trừu tượng hóa thành các kinh nghiệm quyết định nguyên tử thông qua suy luận hồi tưởng (hindsight reasoning). Các kinh nghiệm này được tổ chức vào một ngân hàng kinh nghiệm đã lọc chất lượng, hỗ trợ truy xuất kinh nghiệm theo chính sách tại thời điểm suy luận. Cụ thể, MuSEAgent cho phép khai thác kinh nghiệm thích ứng thông qua các chiến lược tìm kiếm rộng (wide-search) và sâu (deep-search) bổ sung, cho phép tác nhân truy xuất động hướng dẫn đa phương thức trên các góc nhìn ngữ nghĩa kết hợp đa dạng. Cơ chế này phân tách trạng thái đa phương thức phức tạp thành nhiều góc nhìn ngữ nghĩa (ý định nhận thức, lịch sử thực thi công cụ, ngữ cảnh tương tác) để lập chỉ mục kinh nghiệm linh hoạt.

III. Main Results:​

MuSEAgent liên tục vượt trội so với các phương pháp truy xuất kinh nghiệm cấp độ quỹ đạo mạnh mẽ trên cả các tác vụ nhận thức thị giác chi tiết và suy luận đa phương thức phức tạp, với mức tăng gần 8% độ chính xác trung bình. Ví dụ, trên Qwen3-VL-32B-Instruct, MuSEAgent đạt độ chính xác trung bình 65.30%, vượt trội so với phương pháp cơ sở mạnh nhất gần 8%. Trên tác vụ V* Bench Relative Position chi tiết với Qwen3-VL-235B-A22B-Instruct, phương pháp của chúng tôi cải thiện độ chính xác 18.43% so với Expel. Kinh nghiệm theo trạng thái mang lại lợi ích lớn nhất cho các mô hình nhỏ gọn, trong khi hiệu suất tuyệt đối tăng theo kích thước mô hình. Kinh nghiệm theo trạng thái ngoài phân phối (OOD) liên tục vượt trội so với các phương pháp cơ sở cấp độ quỹ đạo trong phân phối. Các nghiên cứu loại bỏ cho thấy việc kết hợp cả quỹ đạo đúng và sai làm nguồn kinh nghiệm mang lại kết quả tốt nhất, và các mô hình suy luận hồi tưởng mạnh hơn (như GPT-4o) tạo ra các kinh nghiệm theo trạng thái chính xác hơn.

IV. Conclusion & Future Works:​

Kết quả nghiên cứu đã xác nhận hiệu quả của việc mô hình hóa kinh nghiệm theo trạng thái trong việc cải thiện khả năng suy luận của tác nhân đa phương thức. Việc trừu tượng hóa các quỹ đạo lịch sử thành các cặp trạng thái-hành động nguyên tử và tổ chức chúng thành một ngân hàng kinh nghiệm chất lượng cao, cùng với cơ chế tìm kiếm sâu và rộng, cho phép tác nhân khai thác hướng dẫn chính xác và không nhiễu ở mỗi bước suy luận. Điều này giúp giảm thiểu nhiễu ngữ cảnh và giải quyết các nút thắt suy luận đa phương thức hiệu quả hơn so với việc dựa vào các phép loại suy cấp độ nhiệm vụ thô.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu về các mô hình suy luận hồi tưởng tự giám sát: Phát triển các phương pháp tự động để trừu tượng hóa và tinh chỉnh kinh nghiệm theo trạng thái từ dữ liệu tương tác thô, giảm sự phụ thuộc vào các mô hình lớn bên ngoài và tăng cường khả năng thích ứng trong các môi trường mới.
  2. Tối ưu hóa chiến lược lựa chọn góc nhìn động cho tác nhân đa phương thức: Khám phá các thuật toán học tăng cường để tác nhân có thể tự động lựa chọn và điều chỉnh các góc nhìn ngữ nghĩa (viewpoints) trong quá trình tìm kiếm kinh nghiệm, thay vì dựa vào các cấu hình cố định, nhằm đạt được hướng dẫn tối ưu cho từng trạng thái quyết định cụ thể.
  3. Mở rộng MuSEAgent sang môi trường tương tác liên tục và thời gian thực: Áp dụng framework kinh nghiệm theo trạng thái vào các tác vụ đòi hỏi phản ứng nhanh và tương tác vật lý (ví dụ: robot, thực tế ảo), tập trung vào các thách thức về hiệu suất tính toán và khả năng khái quát hóa kinh nghiệm trong các miền dữ liệu động.
  4. patent_ideas

2. Patent:​

  1. Hệ thống trợ lý AI di động thông minh với khả năng học hỏi từ kinh nghiệm tương tác: Một ứng dụng trợ lý ảo trên điện thoại di động có khả năng ghi nhớ và phân tích các bước tương tác thành công và thất bại của người dùng với các ứng dụng khác (ví dụ: đặt hàng, chỉnh sửa ảnh). Khi người dùng gặp tình huống tương tự, trợ lý sẽ cung cấp hướng dẫn từng bước dựa trên "kinh nghiệm" đã học, giúp hoàn thành tác vụ nhanh hơn và ít lỗi hơn.
  2. Cải thiện tìm kiếm hình ảnh trên di động bằng kinh nghiệm theo trạng thái: Tính năng tìm kiếm hình ảnh nâng cao trên điện thoại, nơi người dùng có thể tìm kiếm không chỉ bằng từ khóa mà còn bằng cách diễn tả các bước đã thực hiện hoặc mong muốn thực hiện trên hình ảnh (ví dụ: "tìm ảnh đã cắt và có người cười"). Hệ thống sẽ sử dụng "kinh nghiệm" từ các thao tác chỉnh sửa ảnh trước đây của người dùng để gợi ý các ảnh phù hợp hoặc các công cụ chỉnh sửa tiếp theo.
  3. Hệ thống gợi ý hành động đa phương thức cho thiết bị di động: Một công nghệ trên điện thoại thông minh tự động gợi ý các hành động phù hợp dựa trên ngữ cảnh hiện tại của người dùng, bao gồm cả hình ảnh trên màn hình và các tác vụ đang thực hiện. Ví dụ, nếu người dùng đang xem một bức ảnh và có vẻ muốn chỉnh sửa, hệ thống sẽ gợi ý các công cụ chỉnh sửa cụ thể (cắt, xoay, thêm bộ lọc) dựa trên "kinh nghiệm" từ các lần chỉnh sửa trước của người dùng hoặc của cộng đồng.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27813
ArXiv Abstracthttps://arxiv.org/abs/2603.27813
PDF Downloadhttps://arxiv.org/pdf/2603.27813.pdf
Github Repositoryhttps://github.com/DeepExperience/MuSEAgent

11. ImagenWorld: Stress-Testing Image Generation Models with Explainable Human Evaluation on Open-ended Real-World Tasks (17 votes)​

Tác giả: Samin Mahdizadeh Sani, Max Ku, Nima Jamali, Matina Mahdizadeh Sani, Paria Khoshtab, Wei-Chieh Sun, Parnian Fazel, Zhi Rui Tam, Thomas Chong, Edisy Kin Wai Chan, Donald Wai Tong Tsang, Chiao-Wei Hsu, Ting Wai Lam, Ho Yin Sam Ng, Chiafeng Chu, Chak-Wing Mak, Keming Wu, Hiu Tung Wong, Yik Chun Ho, Chi Ruan, Zhuofeng Li, I-Sheng Fang, Shih-Ying Yeh, Ho Kei Cheng, Ping Nie, Wenhu Chen

Xuất bản lúc: 2026-03-29

Tag: Image Generation, Image Editing, Benchmarks, Human Evaluation, VLM, Diffusion Models, Autoregressive Models

I. Main Problem:​

Các benchmark hiện có để đánh giá mô hình tạo ảnh còn hạn chế, thường chỉ tập trung vào các tác vụ cô lập, bao phủ các miền hẹp hoặc cung cấp điểm số không rõ ràng mà không giải thích được các chế độ lỗi. Điều này gây khó khăn trong việc đánh giá mức độ khái quát hóa của các mô hình tổng hợp (unified models) trên toàn bộ các trường hợp sử dụng trong thế giới thực, đặc biệt là khi các mô hình này ngày càng có khả năng xử lý nhiều tác vụ như tạo và chỉnh sửa ảnh trong một framework duy nhất.

II. Main Idea:​

Nghiên cứu giới thiệu ImagenWorld, một benchmark quy mô lớn, lấy con người làm trung tâm, bao gồm 3.6K bộ điều kiện trải rộng trên sáu tác vụ cốt lõi (tạo và chỉnh sửa, với một hoặc nhiều tham chiếu) và sáu miền chủ đề (tác phẩm nghệ thuật, ảnh chân thực, đồ họa thông tin, đồ họa văn bản, đồ họa máy tính và ảnh chụp màn hình). ImagenWorld được hỗ trợ bởi 20K chú thích chi tiết từ con người và một sơ đồ đánh giá có thể giải thích (explainable evaluation schema) giúp gắn thẻ các lỗi ở cấp độ đối tượng và cấp độ phân đoạn cục bộ, bổ sung cho các số liệu tự động dựa trên VLM. Nghiên cứu đánh giá 14 mô hình để cung cấp một công cụ chẩn đoán mạnh mẽ nhằm thúc đẩy quá trình tạo ảnh bền vững.

III. Main Results:​

  1. Các mô hình thường gặp khó khăn hơn trong các tác vụ chỉnh sửa so với tác vụ tạo ảnh, đặc biệt là trong các chỉnh sửa cục bộ. Chúng có xu hướng hoặc tạo ra một hình ảnh hoàn toàn mới hoặc trả về ảnh gốc mà không thay đổi.
  2. Các mô hình hoạt động tốt trong các cài đặt nghệ thuật và ảnh chân thực nhưng gặp khó khăn với các miền mang tính biểu tượng và nặng văn bản như ảnh chụp màn hình và đồ họa thông tin. Qwen-Image là một ngoại lệ, vượt trội hơn các mô hình khác trong đồ họa văn bản nhờ quy trình tuyển chọn dữ liệu mục tiêu.
  3. Các hệ thống mã nguồn đóng (closed-source) dẫn đầu về hiệu suất tổng thể, trong khi các mô hình mã nguồn mở cạnh tranh chủ yếu trong tác vụ text-to-image generation.
  4. Các số liệu dựa trên VLM hiện đại đạt độ chính xác Kendall lên tới 0.79, xấp xỉ xếp hạng của con người, nhưng không thể giải thích chi tiết các lỗi như đánh giá của con người. Con người vẫn không thể thiếu cho việc gắn thẻ chi tiết các chế độ lỗi cụ thể.

IV. Conclusion & Future Works:​

ImagenWorld là một benchmark mạnh mẽ, thống nhất sáu tác vụ tạo và chỉnh sửa ảnh trên sáu miền chủ đề, được hỗ trợ bởi 20K chú thích chi tiết từ con người. Nó giới thiệu một sơ đồ đánh giá có thể giải thích với các nhãn lỗi cấp độ đối tượng và cấp độ phân đoạn, cho phép chẩn đoán lỗi mô hình một cách rõ ràng vượt xa các điểm số vô hướng. Kết quả cho thấy các mô hình hoạt động tốt hơn trong tác vụ tạo ảnh so với chỉnh sửa, gặp khó khăn với các miền mang tính biểu tượng và nặng văn bản, và có khoảng cách hiệu suất đáng kể giữa các mô hình mã nguồn đóng và mã nguồn mở. Các chú thích có cấu trúc của con người đã phát hiện ra các lỗi cục bộ và cung cấp những hiểu biết mà các số liệu dựa trên VLM hiện đại còn bỏ lỡ. ImagenWorld không chỉ là một benchmark nghiêm ngặt mà còn là một công cụ chẩn đoán, đặt nền móng cho các hệ thống tạo ảnh đáng tin cậy và có thể kiểm soát hơn trong tương lai.

Hướng phát triển tương lai:

  1. Sử dụng điểm số đánh giá của con người làm dữ liệu ưu tiên để đào tạo các mô hình tạo ảnh, giúp chúng phù hợp hơn với đánh giá của con người thông qua các kỹ thuật tối ưu hóa ưu tiên hoặc tinh chỉnh dựa trên xếp hạng.
  2. Phát triển các phương pháp chẩn đoán và tự sửa lỗi cho mô hình tạo ảnh bằng cách sử dụng các thẻ lỗi cấp độ đối tượng để tạo ra các tinh chỉnh hình ảnh hoặc hướng dẫn sửa lỗi.
  3. Tạo ra các số liệu đánh giá có thể giải thích tốt hơn, có khả năng nắm bắt các lỗi cấp độ đối tượng, sự không nhất quán trong bố cục và sự không khớp giữa mô tả và đối tượng một cách chính xác hơn so với các số liệu tự động hiện có.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nâng cao hiệu suất mô hình tạo ảnh thông qua tối ưu hóa dựa trên phản hồi của con người: Nghiên cứu này sẽ khám phá việc sử dụng dữ liệu ưu tiên từ ImagenWorld để tinh chỉnh các mô hình tạo ảnh, tập trung vào việc cải thiện sự phù hợp của đầu ra với kỳ vọng và thẩm mỹ của con người.
  2. Hệ thống tạo ảnh tự sửa lỗi với khả năng chẩn đoán cấp độ đối tượng: Đề xuất một framework mới cho phép các mô hình tạo ảnh tự động xác định và sửa chữa các lỗi cục bộ (ví dụ: đối tượng bị thiếu, méo mó) dựa trên các thẻ lỗi cấp độ đối tượng được thu thập từ ImagenWorld, dẫn đến đầu ra chất lượng cao hơn và đáng tin cậy hơn.
  3. Phát triển các số liệu đánh giá giải thích được cho mô hình tạo ảnh đa phương thức: Xây dựng các số liệu tự động mới có thể không chỉ chấm điểm mà còn giải thích nguyên nhân thất bại của mô hình ở cấp độ chi tiết (ví dụ: lỗi bố cục, sai lệch văn bản), sử dụng các chú thích chi tiết của con người từ ImagenWorld làm cơ sở.

2. Patent:​

  1. Trình chỉnh sửa ảnh thông minh với phản hồi lỗi giải thích được trên điện thoại di động: Một ứng dụng chỉnh sửa ảnh trên điện thoại di động sử dụng trí tuệ nhân tạo để không chỉ thực hiện các chỉnh sửa được yêu cầu mà còn cung cấp phản hồi rõ ràng cho người dùng về lý do tại sao một phần chỉnh sửa có thể không đạt yêu cầu. Ví dụ, nếu người dùng cố gắng thay đổi màu sắc của một vật thể, ứng dụng có thể chỉ ra rằng màu sắc mới không phù hợp với phong cách tổng thể của bức ảnh hoặc vật thể bị méo mó. Công nghệ này sẽ giúp người dùng hiểu rõ hơn về hạn chế của chỉnh sửa và cách cải thiện, dựa trên việc phân tích lỗi cấp độ đối tượng và phân đoạn.
  2. Công cụ chỉnh sửa tài liệu và ảnh chụp màn hình dựa trên AI với khả năng sửa văn bản chính xác: Một tính năng trên điện thoại di động cho phép người dùng chỉnh sửa văn bản trong ảnh chụp màn hình hoặc đồ họa thông tin một cách thông minh. Ví dụ, nếu một ảnh chụp màn hình chứa văn bản bị mờ, méo mó hoặc số liệu không nhất quán (như tổng cộng không khớp với các mục), công cụ AI sẽ tự động phát hiện và đề xuất chỉnh sửa văn bản hoặc số liệu đó trở nên rõ ràng và chính xác. Điều này giải quyết vấn đề các mô hình hiện tại gặp khó khăn với nội dung nặng văn bản và số liệu.
  3. Trợ lý tạo và chỉnh sửa hình ảnh đa tham chiếu cho mạng xã hội trên điện thoại di động: Một ứng dụng di động tích hợp trợ lý AI giúp người dùng tạo hoặc chỉnh sửa hình ảnh cho các bài đăng mạng xã hội, đặc biệt khi cần kết hợp nhiều yếu tố tham chiếu (ví dụ: phong cách từ ảnh A, đối tượng từ ảnh B, màu sắc từ ảnh C). Trợ lý này sẽ cung cấp hướng dẫn theo thời gian thực và cảnh báo người dùng về các lỗi phổ biến như việc mô hình tạo ra một hình ảnh hoàn toàn mới thay vì chỉnh sửa, hoặc bỏ qua một trong các tham chiếu đã cung cấp, đảm bảo kết quả cuối cùng phù hợp với ý định của người dùng.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27862
ArXiv Abstracthttps://arxiv.org/abs/2603.27862
PDF Downloadhttps://arxiv.org/pdf/2603.27862.pdf
Github Repositoryhttps://github.com/TIGER-AI-Lab/ImagenWorld

12. On-the-fly Repulsion in the Contextual Space for Rich Diversity in Diffusion Transformers (16 votes)​

Tác giả: Omer Dahary, Benaya Koren, Daniel Garibi, Daniel Cohen-Or

Xuất bản lúc: 2026-03-30

Tag: Diffusion Models, Diffusion Transformers, Text-to-Image, Generative AI, Diversity, Contextual Space, Repulsion Guidance

I. Main Problem:​

Các mô hình khuếch tán Text-to-Image (T2I) hiện đại thường thiếu sự đa dạng, có xu hướng hội tụ vào một tập hợp các giải pháp hình ảnh hẹp cho cùng một lời nhắc (typicality bias), gây khó khăn cho các ứng dụng sáng tạo yêu cầu nhiều kết quả khác nhau. Các phương pháp hiện có để tăng tính đa dạng đều gặp phải vấn đề đánh đổi: can thiệp vào đầu vào mô hình đòi hỏi tối ưu hóa tốn kém, trong khi can thiệp vào các không gian ẩn trung gian thường làm hỏng cấu trúc hình ảnh và gây ra các tạo tác không mong muốn. Vấn đề này đặc biệt nghiêm trọng với các mô hình "Turbo" hoặc mô hình chưng cất, nơi quá trình tạo ảnh diễn ra rất nhanh chóng.

II. Main Idea:​

Các tác giả đề xuất một khuôn khổ mới để đạt được sự đa dạng phong phú trong Diffusion Transformers bằng cách áp dụng lực đẩy (repulsion) trong "Không gian Ngữ cảnh" (Contextual Space). Không gian Ngữ cảnh là không gian đa chiều hình thành bên trong các khối Multimodal Attention (MM-Attention) của kiến trúc Diffusion Transformer (DiT), nơi các biểu diễn văn bản được làm giàu và đồng bộ hóa với cấu trúc hình ảnh đang hình thành. Bằng cách can thiệp "on-the-fly" (tức thì) trong quá trình truyền tiến của transformer, các tác giả áp dụng lực đẩy giữa các token ngữ cảnh của các mẫu khác nhau trong một lô. Điều này cho phép định hướng lại quỹ đạo tạo ảnh sau khi nó đã được thông tin về cấu trúc nhưng trước khi bố cục cuối cùng được cố định, giúp tạo ra sự đa dạng mà không làm mất đi độ trung thực hình ảnh hoặc sự tuân thủ ngữ nghĩa. Phương pháp này hiệu quả về mặt tính toán và tương thích với các mô hình "Turbo" và chưng cất hiện đại.

III. Main Results:​

Phương pháp này tạo ra sự đa dạng phong phú hơn đáng kể mà không làm giảm chất lượng hình ảnh hoặc độ bám sát ngữ nghĩa. Nó đặc biệt hiệu quả, chỉ tăng chi phí tính toán nhỏ (20-30%) và không yêu cầu thêm bộ nhớ, hoạt động tốt ngay cả trên các mô hình "Turbo" và mô hình chưng cất mà các phương pháp truyền thống thường thất bại. Các thí nghiệm định tính (Hình 1, 4, 11) cho thấy sự loại bỏ các thành kiến điển hình và tạo ra nhiều bố cục, sắp xếp, góc máy khác nhau. Về định lượng, phương pháp này đạt được sự đánh đổi chất lượng-đa dạng vượt trội so với các phương pháp cơ sở (CADS, SGI, Particle Guidance, SPARKE) trên các kiến trúc DiT khác nhau (Flux-dev, SD3.5-Turbo, SD3.5-Large) theo các chỉ số Vendi Inception Score, ImageReward, VQAScore và KID. Một nghiên cứu người dùng cũng chỉ ra rằng phương pháp này được ưu tiên hơn so với các phương pháp cạnh tranh khác. Hơn nữa, nó có thể tích hợp thành công vào các mô hình chỉnh sửa hình ảnh như Flux-Kontext.

IV. Conclusion & Future Works:​

Nghiên cứu này nhấn mạnh Không gian Ngữ cảnh trong Diffusion Transformers là một điểm can thiệp hiệu quả để tăng tính đa dạng. Không gian này nằm giữa văn bản và hình ảnh, mã hóa ý định ngữ nghĩa phong phú được định hình bởi hình ảnh đang nổi lên, nhưng chưa bị khóa cứng về mặt không gian. Việc áp dụng lực đẩy tức thì trong không gian này cho phép tăng tính đa dạng một cách có kiểm soát mà không làm giảm chất lượng hình ảnh hoặc tốn kém chi phí tính toán.

Hạn chế: Phương pháp này tăng tính đa dạng nhưng không cung cấp quyền kiểm soát trực tiếp về thuộc tính nào sẽ thay đổi, và đôi khi có thể ưu tiên những thay đổi ngữ nghĩa thô hơn là những thay đổi tinh tế do người dùng chỉ định. Ngoài ra, sự can thiệp tập trung vào các giai đoạn đầu đến giữa của quá trình tạo ảnh; cách phối hợp tốt nhất với các giai đoạn sau hoặc kết hợp với các cơ chế kiểm soát khác vẫn là một câu hỏi mở.

Hướng phát triển tương lai: Một hướng nghiên cứu thú vị là khám phá xem liệu một gợi ý văn bản do người dùng cung cấp, chẳng hạn như "màu sắc" hoặc "kích thước", có thể được sử dụng để hướng dẫn lực đẩy theo một hướng ngữ nghĩa cụ thể trong Không gian Ngữ cảnh hay không. Thay vì khuyến khích sự đa dạng theo cách không giới hạn, ý tưởng là thiên vị các lực đẩy để các mẫu lan truyền chủ yếu theo các thuộc tính liên quan đến từ khóa đã cho. Điều này có thể cho phép một hình thức đa dạng được kiểm soát và dễ giải thích hơn, nơi sự biến đổi tập trung vào các khía cạnh ngữ nghĩa được chọn trong khi các phần khác của quá trình tạo ảnh vẫn ổn định.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Tạo Đa Dạng Hình Ảnh Có Hướng Dẫn Ngữ Nghĩa trong Diffusion Transformers: Nghiên cứu phát triển một phương pháp cho phép người dùng chỉ định các thuộc tính ngữ nghĩa cụ thể (ví dụ: "thay đổi màu sắc", "thay đổi phong cách") để hướng dẫn lực đẩy trong Không gian Ngữ cảnh, từ đó tạo ra sự đa dạng có mục tiêu và kiểm soát được.
  2. Kết Hợp Can Thiệp Đa Giai Đoạn để Tối Ưu Hóa Đa Dạng và Chất Lượng trong Mô Hình Khuếch Tán: Khám phá chiến lược kết hợp lực đẩy trong Không gian Ngữ cảnh ở giai đoạn đầu/giữa của quá trình tạo ảnh với các cơ chế kiểm soát khác ở giai đoạn sau, nhằm đạt được sự cân bằng tối ưu giữa đa dạng, chất lượng và độ bám sát ngữ nghĩa.
  3. Kiểm Soát Tinh Tế Đa Dạng Ngữ Nghĩa trong Không Gian Ngữ Cảnh cho Thế Hệ Text-to-Image: Phát triển các kỹ thuật cho phép kiểm soát chi tiết hơn các biến thể ngữ nghĩa được tạo ra, vượt qua giới hạn của các thay đổi thô để người dùng có thể điều chỉnh các yếu tố nhỏ trong hình ảnh được tạo ra.

2. Patent:​

  1. Chế độ "Sáng Tạo Đa Dạng" cho Ứng dụng Tạo Ảnh trên Di động: Một tính năng trong ứng dụng tạo ảnh bằng AI trên điện thoại di động cho phép người dùng nhập một mô tả và nhận về nhiều phiên bản hình ảnh khác nhau, nhưng vẫn giữ chất lượng cao và phù hợp với mô tả ban đầu. Thay vì chỉ tạo ra một hình ảnh "điển hình", hệ thống sẽ tự động khám phá các góc độ, phong cách, hoặc chi tiết khác nhau của cùng một ý tưởng, giúp người dùng dễ dàng chọn lựa hoặc lấy cảm hứng mà không cần phải nhập lại lời nhắc hay điều chỉnh phức tạp.
  2. Công nghệ "Tạo Biến Thể Chỉnh Sửa Nhanh" cho Ứng dụng Chỉnh Sửa Ảnh: Tích hợp vào ứng dụng chỉnh sửa ảnh trên điện thoại, công nghệ này cho phép người dùng thực hiện một chỉnh sửa cơ bản (ví dụ: thay đổi màu sắc của một vật thể, thêm một yếu tố nhỏ). Sau khi áp dụng, hệ thống không chỉ hiển thị kết quả chỉnh sửa mà còn tự động tạo ra một loạt các biến thể sáng tạo của cùng chỉnh sửa đó (ví dụ: vật thể có nhiều sắc thái màu khác nhau, yếu tố được đặt ở các vị trí hoặc kiểu dáng khác nhau), giúp người dùng khám phá nhiều khả năng chỉ với một thao tác.
  3. Hệ thống "Hình Nền Động và Đa Dạng AI" trên Điện thoại: Một hệ thống cho phép người dùng chọn một chủ đề hoặc nhập mô tả ngắn gọn (ví dụ: "cảnh bình minh trên núi", "thiên nhiên tươi mát") để tạo ra các hình nền. Thay vì chỉ tạo ra một hình nền tĩnh, hệ thống sẽ tạo ra một loạt các hình nền động hoặc tĩnh đa dạng theo chủ đề đó, tự động thay đổi theo thời gian hoặc theo tương tác của người dùng. Các hình nền này sẽ có sự khác biệt về bố cục, màu sắc, hoặc chi tiết nhưng vẫn giữ được ý nghĩa chung của chủ đề, mang lại trải nghiệm cá nhân hóa phong phú và không bị lặp lại.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28762
ArXiv Abstracthttps://arxiv.org/abs/2603.28762
PDF Downloadhttps://arxiv.org/pdf/2603.28762.pdf
Github RepositoryN/A

13. ResAdapt: Adaptive Resolution for Efficient Multimodal Reasoning (15 votes)​

Tác giả: Huanxuan Liao, Zhongtao Jiang, Yupu Hao, Yuqiao Tan, Shizhu He, Jun Zhao, Kun Xu, Kang Liu

Xuất bản lúc: 2026-03-30

Tag: MLLMs, Video Reasoning, Adaptive Resolution, Efficiency, Reinforcement Learning, Policy Optimization, Contextual Bandit

I. Main Problem:​

Các Mô hình Ngôn ngữ Lớn Đa phương thức (MLLMs) gặp phải vấn đề về ngân sách token hình ảnh tăng lên quá mức khi mở rộng cả độ phân giải không gian và phạm vi thời gian trong suy luận video. Các chiến lược hiệu quả hiện có can thiệp quá muộn, như cắt bỏ token sau khi mã hóa đã tốn toàn bộ chi phí tính toán hoặc truy xuất lặp lại gây ra độ trễ đa lượt. Giảm độ phân giải có nguy cơ làm mất các tín hiệu hình ảnh nhỏ quan trọng, trong khi rút ngắn clip loại bỏ ngữ cảnh thời gian cần thiết cho suy luận dài hạn. Việc tối ưu hóa phân bổ trước khi mã hóa cũng đặt ra thách thức lớn trong học tăng cường, bao gồm không gian hành động liên tục, toán tử hình ảnh không thể phân biệt được và các hình phạt chi phí-độ chính xác đơn thuần có thể làm sụp đổ chính sách.

II. Main Idea:​

ResAdapt đề xuất một khung làm việc phân bổ lại ngân sách hình ảnh trước khi mã hóa. Một Bộ cấp phát (Allocator) nhẹ, nhận biết truy vấn, dự đoán tỷ lệ độ phân giải trên mỗi khung hình, điều chỉnh số pixel mà backbone nhận được trong khi vẫn giữ giao diện token gốc và khả năng tương thích với các công cụ suy luận được tối ưu hóa. Để huấn luyện pipeline không thể phân biệt được này, chúng tôi giới thiệu Tối ưu hóa chính sách nhận biết chi phí (CAPO), kết hợp một điểm xoay chi phí động với định hình phần thưởng bất đối xứng để cùng tối đa hóa độ chính xác suy luận dưới ngân sách hình ảnh nghiêm ngặt. Điều này ngăn chặn sự sụp đổ chính sách do các hình phạt chi phí trực tiếp gây ra. Bộ cấp phát kết quả tập trung pixel vào các khung hình giàu thông tin, thể hiện nhận thức chủ động thích ứng với nội dung được học hoàn toàn từ phần thưởng nhiệm vụ. Ngoài ra, CAPO còn sử dụng một bộ điều hòa tương tự thời gian để ngăn chặn việc phân bổ ngân sách cao dư thừa trên các khung hình tương tự liền kề.

III. Main Results:​

Trên các điểm chuẩn Video QA và Temporal Grounding, ResAdapt đạt hoặc vượt trội hơn các đường cơ sở không nén trong khi loại bỏ hơn 90% token hình ảnh. Quan trọng hơn, ngân sách không gian được tiết kiệm được tái đầu tư vào phạm vi thời gian: với cùng một lượng tính toán, ResAdapt xử lý số khung hình nhiều gấp 16 lần, mang lại mức tăng tương đối >15% trên các tác vụ suy luận video dài phức tạp. Chính sách đã học thể hiện khả năng nhận thức chủ động, tự động tập trung ngân sách hình ảnh vào các khung hình quyết định chỉ trong một lần chuyển tiếp, mà không yêu cầu giám sát nổi bật rõ ràng. Các bảng kết quả cho thấy ResAdapt đạt hiệu suất cạnh tranh hoặc tốt hơn đáng kể so với các phương pháp hiện có, đặc biệt là khi ngân sách token hình ảnh bị hạn chế.

IV. Conclusion & Future Works:​

ResAdapt là một khung làm việc thích ứng phía đầu vào, giải quyết vấn đề phân bổ ngân sách hình ảnh động trên mỗi khung hình như một bài toán Contextual Bandit, duy trì hoàn toàn kiến trúc gốc và các tối ưu hóa phần cứng của MLLMs. Chúng tôi đã đề xuất CAPO cùng với bộ điều hòa tương tự thời gian để cung cấp tín hiệu học ổn định, bất đối xứng, cùng tối ưu hóa độ chính xác và chi phí mà không cần các quy tắc kinh nghiệm thủ công. Các thử nghiệm rộng rãi đã chứng minh rằng ResAdapt đạt được đường biên Pareto hiệu quả-độ chính xác vượt trội trên các tác vụ Video QA và Temporal Grounding, với chính sách đã học thể hiện nhận thức chủ động thích ứng với nội dung. Hướng phát triển trong tương lai có thể bao gồm việc mở rộng các loại toán tử ngân sách hình ảnh, thích ứng với video streaming thời gian thực, và áp dụng nguyên lý thích ứng đầu vào này cho các tác vụ đa phương thức khác ngoài suy luận video.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu và so sánh các toán tử ngân sách hình ảnh khác nhau (ví dụ: thay đổi kích thước, chọn khung hình, kết hợp) trong khung ResAdapt, đánh giá tác động của chúng đến hiệu quả và độ chính xác trên các loại video và tác vụ khác nhau.
  2. Mở rộng ResAdapt để xử lý video streaming thời gian thực, nơi Bộ cấp phát phải đưa ra quyết định phân bổ ngân sách mà không có thông tin về các khung hình tương lai, tập trung vào việc giảm độ trễ và duy trì hiệu suất trong môi trường động.
  3. Áp dụng nguyên lý thích ứng độ phân giải phía đầu vào của ResAdapt cho các tác vụ đa phương thức khác ngoài suy luận video, chẳng hạn như phân tích hình ảnh y tế lớn, dữ liệu vệ tinh, hoặc xử lý dữ liệu 3D, để tối ưu hóa hiệu quả tính toán trên các bộ dữ liệu có đầu vào hình ảnh khổng lồ.

2. Patent:​

  1. Hệ thống tiết kiệm pin thông minh cho thiết bị di động bằng cách điều chỉnh độ phân giải video: Một hệ thống trên điện thoại thông minh tự động điều chỉnh độ phân giải của từng khung hình video dựa trên nội dung và truy vấn của người dùng (nếu có). Các khung hình chứa thông tin quan trọng hoặc được người dùng quan tâm sẽ được giữ độ phân giải cao, trong khi các khung hình ít quan trọng hoặc lặp lại sẽ được giảm độ phân giải. Điều này giúp giảm đáng kể tải xử lý cho bộ xử lý đồ họa và tiết kiệm pin, đặc biệt hữu ích khi xem video dài hoặc sử dụng các ứng dụng camera yêu cầu xử lý liên tục.
  2. Công cụ tối ưu hóa hiệu suất ứng dụng thực tế tăng cường (AR) trên di động: Một công cụ phần mềm cho phép các ứng dụng AR trên điện thoại di động chỉ xử lý các vùng hoặc đối tượng quan trọng trong khung hình camera ở độ phân giải cao, trong khi phần còn lại của khung hình được xử lý ở độ phân giải thấp hơn. Công cụ này sử dụng một mô hình nhẹ để xác định các khu vực có ý nghĩa dựa trên ngữ cảnh và tương tác của người dùng, giúp giảm độ trễ, tăng tốc độ phản hồi của ứng dụng AR và cải thiện trải nghiệm người dùng trên các thiết bị di động có tài nguyên hạn chế.
  3. Hệ thống nén video thông minh theo ngữ cảnh cho camera an ninh/giám sát di động: Một hệ thống tích hợp vào các ứng dụng camera an ninh hoặc giám sát trên điện thoại di động để nén video hiệu quả hơn. Thay vì nén đồng nhất, hệ thống tự động xác định các khung hình có sự kiện quan trọng (ví dụ: chuyển động, thay đổi cảnh) và duy trì độ phân giải cao cho chúng, đồng thời giảm độ phân giải cho các khung hình không có sự kiện. Điều này giúp tiết kiệm đáng kể dung lượng lưu trữ và băng thông truyền tải mà vẫn đảm bảo chất lượng hình ảnh tại các thời điểm quan trọng, tối ưu cho việc sử dụng điện thoại cũ làm thiết bị giám sát.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28610
ArXiv Abstracthttps://arxiv.org/abs/2603.28610
PDF Downloadhttps://arxiv.org/pdf/2603.28610.pdf
Github Repositoryhttps://github.com/Xnhyacinth/ResAdapt

14. Kernel-Smith: A Unified Recipe for Evolutionary Kernel Optimization (15 votes)​

Tác giả: He Du, Qiming Ge, Jiakai Hu, Aijun Yang, Zheng Cai, Zixian Huang, Sheng Yuan, Qinxiu Cheng, Xinchen Xie, Yicheng Chen, Yining Li, Jiaxing Xie, Huanan Dong, Yaguang Wu, Xiangjun Huang, Jian Yang, Hui Wang, Bowen Zhou, Bowen Li, Qipeng Guo, Kai Chen

Xuất bản lúc: 2026-03-30

Tag: Kernel Optimization, GPU Kernel Generation, LLMs, Evolutionary Algorithms, Reinforcement Learning, Supervised Fine-tuning, Heterogeneous Platforms

I. Main Problem:​

Các phương pháp dựa trên LLM hiện tại gặp khó khăn trong việc tối ưu hóa kernel GPU hiệu suất cao một cách đáng tin cậy và bền vững, vượt ra ngoài khả năng tạo mã một lần. Việc tạo kernel hiệu quả đòi hỏi tìm kiếm nhiều lựa chọn triển khai, nhưng các quy trình tinh chỉnh đa lượt có thể hạn chế sự đa dạng khám phá và neo các quyết định sau này vào các lựa chọn ban đầu. Ngoài ra, tính đúng đắn về chức năng và hiệu suất cao là hai khả năng khác nhau; mục tiêu không chỉ là tạo ra một kernel đúng và nhanh trong một lần, mà là duy trì quá trình tối ưu hóa lặp đi lặp lại để liên tục cải thiện các chương trình ứng cử viên. Sự khan hiếm mã CUDA và Triton được tối ưu hóa bởi con người cũng hạn chế việc tinh chỉnh có giám sát tiêu chuẩn.

II. Main Idea:​

Kernel-Smith là một khuôn khổ thống nhất để tạo kernel và toán tử GPU hiệu suất cao, kết hợp một tác nhân tiến hóa ổn định dựa trên đánh giá với một công thức huấn luyện hướng tiến hóa. Về phía tác nhân, Kernel-Smith duy trì một quần thể các ứng viên có thể thực thi và liên tục cải thiện chúng bằng cách sử dụng kho lưu trữ các chương trình đa dạng và hoạt động tốt nhất cùng với phản hồi thực thi có cấu trúc về biên dịch, tính đúng đắn và tốc độ. Để làm cho việc tìm kiếm này đáng tin cậy, hệ thống xây dựng các dịch vụ đánh giá dành riêng cho backend (Triton trên NVIDIA GPU và Maca trên MetaX GPU) với các biện pháp ổn định như khởi động, đo lường lặp lại và loại bỏ ngoại lệ. Về phía huấn luyện, Kernel-Smith chuyển đổi các quỹ đạo tiến hóa dài hạn thành tín hiệu học tăng cường và giám sát theo từng bước, chỉ giữ lại các bản sửa đổi có lợi nhuận cao, bảo toàn tính đúng đắn. Điều này tối ưu hóa mô hình như một công cụ cải thiện cục bộ mạnh mẽ bên trong vòng lặp tiến hóa, thay vì một trình tạo một lần. Dữ liệu huấn luyện được tổng hợp từ các kho GitHub đa dạng, qua các giai đoạn "Cold-start Data" và "Cluster-Seeded Expert Data", với các chiến lược lọc kép cho SFT (tính đúng đắn và hiệu suất > 1.0) và tập trung vào các "bước tốt nhất" trong RL để tối đa hóa hiệu quả học tập.

III. Main Results:​

Kernel-Smith-235B-RL đạt hiệu suất tổng thể hàng đầu trên KernelBench với backend Nvidia Triton, đạt tỷ lệ tăng tốc trung bình tốt nhất (avg amsr là 3.70) và vượt trội so với các mô hình độc quyền như Gemini-3.0-pro và Claude-4.6-opus. Đặc biệt, nó thể hiện ưu thế rõ rệt trong các tác vụ Cấp độ 2 (avg amsr là 7.77), vượt xa Claude-4.6-opus (5.83). Trên backend MetaX MACA, Kernel-Smith-MACA-30B vượt qua các đối thủ quy mô lớn như DeepSeek-v3.2-think và Qwen3-235B-2507-think. Luồng công việc này cũng đã đóng góp vào các hệ thống sản xuất như SGLang (tăng tốc 4.78 lần cho kernel normal_decode_set_metadata) và LMDeploy (tăng tốc 1.36 lần cho kernel định tuyến MoE, dẫn đến cải thiện thông lượng 1.85%-3.00%), chứng minh khả năng chuyển đổi từ đánh giá có kiểm soát sang triển khai thực tế.

IV. Conclusion & Future Works:​

Kernel-Smith cung cấp một công thức thống nhất để tối ưu hóa kernel tiến hóa, kết hợp đánh giá ổn định và huấn luyện hậu tiến hóa. Nó giải quyết các thách thức trong việc tạo kernel dựa trên LLM, chuyển từ tạo một lần sang cải thiện lặp đi lặp lại, hướng đến hiệu suất. Giá trị thực tiễn của nó được chứng minh thông qua các đóng góp cho các hệ thống sản xuất và khả năng thích ứng với các nền tảng phần cứng không đồng nhất. Các hướng nghiên cứu trong tương lai có thể bao gồm việc mở rộng sang nhiều nền tảng hơn (ví dụ: Huawei NPUs), tinh chỉnh thêm các thuật toán tìm kiếm và khám phá các mục tiêu tối ưu hóa phức tạp hơn.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu về việc cải thiện tính ổn định và khả năng tổng quát hóa của tác nhân tiến hóa trên các kiến trúc phần cứng đa dạng hơn (ví dụ: ASIC tùy chỉnh, thiết bị biên) và các loại kernel khác nhau.
  2. Khám phá các chiến lược nén hoặc lọc quỹ đạo tiên tiến hơn cho học tăng cường để xác định các "cải tiến nguyên tử" trong các bài toán tối ưu hóa đa mục tiêu phức tạp, vượt ra ngoài việc tạo kernel.
  3. Điều tra sự phối hợp giữa kiến thức chuyên gia của con người và tìm kiếm tiến hóa dựa trên LLM để tối ưu hóa kernel, có thể thông qua các hệ thống tương tác hoặc có sự tham gia của con người.

2. Patent:​

  1. Bộ xử lý AI di động thích ứng tiết kiệm năng lượng: Một hệ thống cho thiết bị di động tự động tối ưu hóa việc thực thi các mô hình AI (ví dụ: cho các tính năng camera, trợ lý giọng nói) bằng cách tạo và chọn động các mã kernel chuyên biệt, tiết kiệm năng lượng, được điều chỉnh cho kiến trúc GPU/NPU di động cụ thể và khối lượng công việc hiện tại, đảm bảo tiêu thụ pin tối thiểu trong khi duy trì hiệu suất cao.
  2. Tối ưu hóa công cụ trò chơi trên thiết bị: Một khuôn khổ được tích hợp vào các công cụ trò chơi di động liên tục phân tích hiệu suất trò chơi và sử dụng thuật toán tìm kiếm tiến hóa để tạo ra các kernel hiển thị hoặc vật lý được tối ưu hóa cao ngay lập tức, thích ứng với các mẫu thiết bị và cài đặt người dùng khác nhau để cung cấp trải nghiệm chơi game mượt mà hơn và giảm sinh nhiệt.
  3. Bộ tăng tốc hiệu suất ứng dụng di động cá nhân hóa: Một dịch vụ nền trên điện thoại di động học thói quen người dùng và các tính năng ứng dụng thường dùng, sau đó chủ động tối ưu hóa các kernel tính toán cơ bản cho các thành phần ứng dụng cụ thể đó (ví dụ: tải ảnh, xử lý dữ liệu) bằng cách sử dụng phương pháp lặp đi lặp lại, dựa trên phản hồi để đảm bảo thời gian phản hồi nhanh hơn và trải nghiệm người dùng mượt mà hơn.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28342
ArXiv Abstracthttps://arxiv.org/abs/2603.28342
PDF Downloadhttps://arxiv.org/pdf/2603.28342.pdf
Github Repositoryhttps://github.com/InternLM/Kernel-Smith

15. Marco DeepResearch: Unlocking Efficient Deep Research Agents via Verification-Centric Design (12 votes)​

Tác giả: Bin Zhu, Qianghuai Jia, Tian Lan, Junyang Ren, Feng Gu, Feihu Jiang, Longyue Wang, Zhao Xu, Weihua Luo

Xuất bản lúc: 2026-03-30

Tag: Deep Research Agents, LLMs, Verification, Data Synthesis, Trajectory Optimization, Reinforcement Learning, Supervised Fine-tuning, Tool-augmented Agents

I. Main Problem:​

Các tác nhân nghiên cứu chuyên sâu hiện tại gặp phải một nút thắt quan trọng: thiếu các cơ chế xác minh rõ ràng trong quá trình tổng hợp dữ liệu hỏi đáp (QA), xây dựng quỹ đạo và mở rộng quy mô trong thời gian kiểm thử (test-time scaling). Các lỗi được đưa vào ở mỗi giai đoạn sẽ lan truyền xuống các giai đoạn tiếp theo và làm giảm hiệu suất tổng thể của tác nhân. Cụ thể, trong tổng hợp dữ liệu QA, việc che giấu thực thể thường dẫn đến các câu trả lời không duy nhất hoặc không chính xác; trong xây dựng quỹ đạo, thiếu xác minh rõ ràng khiến tác nhân chấp nhận các kết quả chất lượng thấp sớm và bỏ qua các lựa chọn thay thế giá trị cao; và trong mở rộng quy mô thời gian kiểm thử, việc thiếu xác minh các bước trung gian và câu trả lời cuối cùng dẫn đến việc chấp nhận các lỗi sớm mà không kích hoạt hành vi xác minh để khắc phục.

II. Main Idea:​

Để giải quyết các vấn đề về xác minh, chúng tôi giới thiệu Marco DeepResearch, một tác nhân nghiên cứu chuyên sâu được tối ưu hóa với khuôn khổ tập trung vào xác minh ở ba cấp độ:

  1. Tổng hợp dữ liệu QA được xác minh: Chúng tôi đưa các cơ chế xác minh vào quá trình tổng hợp QA dựa trên đồ thị và dựa trên tác nhân để kiểm soát độ khó của câu hỏi, đồng thời đảm bảo các câu trả lời là duy nhất và chính xác. Đối với tổng hợp dựa trên đồ thị, sử dụng phương pháp xây dựng ngược từ câu trả lời với xác minh đối kháng. Đối với tổng hợp dựa trên tác nhân, sử dụng vòng lặp Generation–Execution–Verification với tác nhân hỏi, tác nhân tìm kiếm và tác nhân xác minh, kết hợp với tối ưu hóa lặp lại chẩn đoán.
  2. Xây dựng quỹ đạo dựa trên xác minh: Chúng tôi thiết kế một phương pháp tổng hợp quỹ đạo dựa trên xác minh, đưa các mẫu xác minh rõ ràng vào quỹ đạo huấn luyện. Điều này bao gồm khuôn khổ đa tác nhân với tác nhân chính, tác nhân phụ tìm kiếm và tác nhân phụ xác minh, cũng như cơ chế khôi phục quỹ đạo thất bại thông qua phản ánh và chạy lại (re-rollout).
  3. Mở rộng quy mô trong thời gian kiểm thử được hướng dẫn bởi xác minh: Chúng tôi sử dụng chính Marco DeepResearch làm công cụ xác minh trong thời gian suy luận và cải thiện hiệu suất trên các câu hỏi khó. Điều này được thực hiện bằng cách kết hợp chiến lược quản lý ngữ cảnh "Discard All" với việc sử dụng tác nhân làm người đánh giá (agent-as-a-judge) và kiểm tra dựa trên quy tắc cho các câu trả lời ứng viên, cùng với việc xác minh chung (Joint Verify) khi đạt đến giới hạn hoặc điều kiện hội tụ.

III. Main Results:​

Marco DeepResearch, một tác nhân quy mô 8B, đã vượt trội đáng kể so với các tác nhân nghiên cứu chuyên sâu quy mô 8B khác trên hầu hết các điểm chuẩn khó khăn nhất như BrowseComp (31.4), BrowseComp-ZH (47.1), WebWalkerQA (69.6) và xBench-DeepSearch (82.0 trên phân đoạn 2505 và 42.0 trên phân đoạn 2510). Điều quan trọng là, với ngân sách tối đa 600 lượt gọi công cụ, Marco DeepResearch thậm chí còn vượt qua hoặc tiệm cận một số tác nhân quy mô 30B, như Tongyi DeepResearch-30B và MiroThinker-v1.0-30B. Các nghiên cứu loại bỏ đã chứng minh đóng góp của các thiết kế được đề xuất. Dữ liệu tổng hợp của chúng tôi có chuỗi token dài hơn và nhiều vòng gọi công cụ hơn, đồng thời cho thấy tỷ lệ trả lời được thấp hơn (29.0% so với 51.7% của dữ liệu mã nguồn mở), cho thấy độ khó cao hơn.

IV. Conclusion & Future Works:​

Nghiên cứu này giới thiệu Marco DeepResearch, một tác nhân nghiên cứu chuyên sâu hiệu quả được tối ưu hóa với khuôn khổ tập trung vào xác minh ở ba cấp độ: tổng hợp dữ liệu QA, xây dựng quỹ đạo và mở rộng quy mô trong thời gian kiểm thử. Các kết quả thực nghiệm rộng rãi đã chứng minh rằng Marco DeepResearch vượt trội đáng kể so với các tác nhân quy mô 8B và thậm chí sánh ngang hoặc vượt qua một số tác nhân quy mô 30B trên các điểm chuẩn thách thức. Điều này khẳng định hiệu quả của các phương pháp tổng hợp dữ liệu QA, xây dựng quỹ đạo và chiến lược mở rộng quy mô trong thời gian kiểm thử được đề xuất, chứng minh rằng mô hình 8B được tối ưu hóa có thể thu hẹp khoảng cách hiệu suất với các mô hình nền tảng lớn trong các tác vụ điều hướng web và tìm kiếm thông tin phức tạp.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu cơ chế xác minh tự động và thích ứng cho các tác nhân AI thực hiện các nhiệm vụ phức tạp, vượt ra ngoài tìm kiếm thông tin chuyên sâu, chẳng hạn như lập kế hoạch đa bước hoặc tạo nội dung sáng tạo, nhằm tối ưu hóa việc sử dụng tài nguyên và độ tin cậy.
  2. Phát triển các phương pháp huấn luyện tác nhân nghiên cứu chuyên sâu sử dụng dữ liệu tổng hợp với các kỹ thuật xác minh nâng cao, tập trung vào việc tạo ra các tập dữ liệu có độ khó cao và không có lỗi, bao gồm các loại lỗi mới và các kịch bản thực tế hơn.
  3. Khám phá chiến lược mở rộng quy mô trong thời gian kiểm thử (test-time scaling) dựa trên xác minh cho các tác nhân AI, tích hợp các mô hình xác minh nhẹ hoặc phân tán để duy trì hiệu suất cao trên các thiết bị tài nguyên hạn chế, đồng thời giảm thiểu chi phí tính toán.

2. Patent:​

  1. Hệ thống trợ lý nghiên cứu di động có xác minh thông tin: Một ứng dụng di động cho phép người dùng đặt các câu hỏi phức tạp hoặc yêu cầu nghiên cứu sâu rộng. Ứng dụng này sẽ tự động tìm kiếm thông tin trên web, tổng hợp kết quả và đặc biệt là sử dụng cơ chế xác minh tích hợp để kiểm tra tính chính xác và độc đáo của các câu trả lời trước khi hiển thị cho người dùng. Điều này đảm bảo người dùng nhận được thông tin đáng tin cậy cho các tác vụ như lập kế hoạch du lịch, nghiên cứu mua sắm hoặc tìm kiếm kiến thức chuyên sâu.
  2. Công cụ tạo dữ liệu hỏi đáp (QA) được xác minh cho ứng dụng giáo dục: Một công cụ trên điện thoại di động giúp tạo ra các câu hỏi và câu trả lời chất lượng cao cho các ứng dụng học tập hoặc luyện thi. Công cụ này sẽ sử dụng các kỹ thuật tổng hợp dữ liệu dựa trên đồ thị hoặc tác nhân, kết hợp với quy trình xác minh chặt chẽ để đảm bảo rằng các câu hỏi khó, câu trả lời là duy nhất và chính xác, phù hợp cho việc đào tạo các mô hình ngôn ngữ nhỏ hoặc tạo nội dung giáo dục tương tác.
  3. Tính năng kiểm tra tính xác thực nội dung thời gian thực cho trình duyệt di động: Tích hợp một tác nhân xác minh vào trình duyệt web trên điện thoại. Khi người dùng truy cập một trang web hoặc đọc một bài viết, tác nhân này sẽ tự động phân tích nội dung, tìm kiếm thông tin liên quan từ các nguồn đáng tin cậy khác và thực hiện các bước xác minh để cảnh báo người dùng về thông tin sai lệch, không chính xác hoặc thiếu căn cứ, đặc biệt hữu ích cho các tin tức và thông tin sức khỏe.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.28376
ArXiv Abstracthttps://arxiv.org/abs/2603.28376
PDF Downloadhttps://arxiv.org/pdf/2603.28376.pdf
Github RepositoryN/A

16. ChartNet: A Million-Scale, High-Quality Multimodal Dataset for Robust Chart Understanding (12 votes)​

Tác giả: Jovana Kondic, Pengyuan Li, Dhiraj Joshi, Isaac Sanchez, Ben Wiesel, Shafiq Abedin, Amit Alfassy, Eli Schwartz, Daniel Caraballo, Yagmur Gizem Cinar, Florian Scheidegger, Steven I. Ross, Daniel Karl I. Weidele, Hang Hua, Ekaterina Arutyunova, Roei Herzig, Zexue He, Zihan Wang, Xinyue Yu, Yunfei Zhao, Sicong Jiang, Minghao Liu, Qunshu Lin, Peter Staar, Luis Lastras, Aude Oliva, Rogerio Feris

Xuất bản lúc: 2026-03-28

Tag: Chart Understanding, Multimodal Dataset, Vision-Language Models, Synthetic Data Generation, Code-guided Synthesis, Question Answering, Data Extraction

I. Main Problem:​

Các mô hình Vision-Language (VLMs) hiện tại còn hạn chế trong việc cùng lúc suy luận dựa trên các mẫu hình ảnh hình học, dữ liệu số có cấu trúc và ngôn ngữ tự nhiên để hiểu biểu đồ. Sự tiến bộ bị giới hạn bởi các bộ dữ liệu hiện có thường có quy mô nhỏ, phạm vi hẹp hoặc không đầy đủ về độ phủ đa phương thức (thiếu mã vẽ biểu đồ, chú thích grounding, dấu vết suy luận, v.v.), khiến các mô hình mã nguồn mở tụt hậu so với các hệ thống độc quyền trong các tác vụ suy luận biểu đồ phức tạp.

II. Main Idea:​

Giới thiệu ChartNet, một bộ dữ liệu đa phương thức chất lượng cao, quy mô triệu mẫu, được thiết kế để nâng cao khả năng diễn giải và suy luận biểu đồ. ChartNet sử dụng một quy trình tổng hợp mới dựa trên mã để tạo ra 1.5 triệu mẫu biểu đồ đa dạng, bao gồm 24 loại biểu đồ và 6 thư viện vẽ. Mỗi mẫu bao gồm năm thành phần được căn chỉnh: mã vẽ, hình ảnh biểu đồ đã render, bảng dữ liệu, tóm tắt ngôn ngữ tự nhiên và câu hỏi-trả lời với suy luận (Chain-of-Thought – CoT). Bộ dữ liệu cũng bao gồm các tập con chuyên biệt với dữ liệu được chú thích bởi con người, dữ liệu thực tế, dữ liệu an toàn và grounding. Một quy trình lọc chất lượng nghiêm ngặt đảm bảo độ trung thực hình ảnh, độ chính xác ngữ nghĩa và sự đa dạng.

III. Main Results:​

Việc tinh chỉnh trên ChartNet liên tục cải thiện kết quả trên các điểm chuẩn, chứng minh tiện ích của nó như một nguồn giám sát quy mô lớn cho các mô hình đa phương thức. Các mô hình được tinh chỉnh trên ChartNet vượt trội hơn các mô hình lớn hơn nhiều lần và thậm chí cả GPT-4o trên tất cả các tác vụ. Cụ thể, đạt được những cải thiện đáng kể trong: tái tạo biểu đồ (Chart Reconstruction), trích xuất dữ liệu biểu đồ (Chart Data Extraction) với LLaVA-7B vượt trội GPT-4o, tóm tắt biểu đồ (Chart Summarization) với Granite-Vision-2B vượt trội GPT-4o và suy luận QA với CoT (LLaVA-7B đạt 70.3%, vượt trội GPT-4o). Những cải tiến này cũng được chứng minh là có khả năng tổng quát hóa tốt sang các điểm chuẩn công khai trong thế giới thực như ChartCap và ChartMimic-v2.

IV. Conclusion & Future Works:​

ChartNet giải quyết nút thắt cổ chai trung tâm trong việc hiểu biểu đồ: thiếu sự giám sát quy mô lớn, độ trung thực cao, căn chỉnh hình ảnh, mã vẽ, dữ liệu số, mô tả văn bản và dấu vết suy luận. Bằng cách tạo ra hơn một triệu bộ dữ liệu đa phương thức được căn chỉnh, ChartNet trang bị cho các VLM kiến thức có nền tảng lập trình, có thể chuyển giao qua các tác vụ tái tạo biểu đồ thành mã, trích xuất dữ liệu, tóm tắt và suy luận đa bước. Các thí nghiệm cho thấy những cải tiến nhất quán trên các kích thước và kiến trúc mô hình, thường vượt qua các hệ thống mã nguồn mở lớn hơn nhiều và thậm chí cả các mô hình tiên tiến độc quyền như GPT-4o. ChartNet cung cấp một nền tảng mở, có thể mở rộng cho nghiên cứu về suy luận số, hiểu trực quan hóa, thông minh tài liệu và mô hình đa phương thức căn chỉnh mã, giúp các VLM chuyển từ mô tả biểu đồ sang hiểu thông tin có cấu trúc mà chúng mã hóa.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nghiên cứu về khả năng suy luận số học đa phương thức nâng cao: Khám phá cách tận dụng hơn nữa sự giám sát dựa trên mã của ChartNet để phát triển các kỹ thuật cho mô hình ngôn ngữ lớn (LLM) và mô hình đa phương thức (VLM) có khả năng thực hiện suy luận số học phức tạp hơn, bao gồm phân tích thống kê, dự báo và phát hiện bất thường từ biểu đồ.
  2. Phát triển mô hình hiểu biểu đồ đa ngôn ngữ toàn cầu: Nghiên cứu và phát triển các kiến trúc VLM mới có khả năng hiểu và diễn giải biểu đồ từ nhiều ngôn ngữ khác nhau, tận dụng tập dữ liệu thực tế và đa dạng về chủ đề của ChartNet để hỗ trợ phân tích dữ liệu toàn cầu và xuyên văn hóa.
  3. Xây dựng hệ thống an toàn và đạo đức cho diễn giải biểu đồ: Phát triển các phương pháp để đảm bảo các mô hình hiểu biểu đồ không tạo ra kết quả sai lệch hoặc có hại khi đối mặt với dữ liệu nhạy cảm hoặc câu hỏi độc hại, sử dụng tập con dữ liệu an toàn của ChartNet để huấn luyện và đánh giá sự mạnh mẽ của mô hình trước các lỗ hổng jailbreak và định kiến.
  4. Nghiên cứu về chuyển đổi biểu đồ sang mã với khả năng chỉnh sửa và tương tác: Phát triển các phương pháp để mô hình không chỉ tạo ra mã vẽ biểu đồ mà còn cho phép người dùng chỉnh sửa hoặc tương tác với mã đó một cách trực quan, giúp tùy chỉnh và khám phá dữ liệu dễ dàng hơn. Điều này có thể bao gồm việc tạo ra các giao diện lập trình trực quan (visual programming interfaces) hoặc các công cụ chỉnh sửa mã thông minh dựa trên phản hồi hình ảnh.

2. Patent:​

  1. Hệ thống trích xuất dữ liệu biểu đồ thông minh trên điện thoại di động: Một ứng dụng trên điện thoại di động cho phép người dùng chụp ảnh bất kỳ biểu đồ nào (ví dụ: trên báo cáo tài chính, tạp chí hoặc màn hình) và ngay lập tức trích xuất dữ liệu số cơ bản vào định dạng bảng tính (CSV) và cung cấp một bản tóm tắt ngắn gọn về các xu hướng chính của biểu đồ bằng ngôn ngữ tự nhiên.
  2. Công cụ giải thích biểu đồ tương tác theo ngữ cảnh trên điện thoại di động: Một tính năng trên điện thoại di động mà khi người dùng xem một biểu đồ (dù là hình ảnh tĩnh hay qua camera trực tiếp), nó sẽ tự động nhận diện và làm nổi bật các yếu tố cụ thể của biểu đồ (ví dụ: một cột, một đường hoặc một phần bánh) và cung cấp giải thích chi tiết về giá trị dữ liệu, ngữ cảnh của nó và mối quan hệ với các yếu tố khác, tất cả mà không cần nhập liệu thủ công.
  3. Hệ thống kể chuyện dữ liệu cá nhân hóa từ biểu đồ trên điện thoại di động: Một ứng dụng di động nhận một hình ảnh biểu đồ và tạo ra một “câu chuyện” hoặc giải thích được cá nhân hóa dựa trên sở thích hoặc câu hỏi của người dùng. Ví dụ, người dùng có thể hỏi “Xu hướng quan trọng nhất cho doanh nghiệp của tôi là gì?” và ứng dụng sẽ diễn giải biểu đồ, nêu bật những hiểu biết liên quan và giải thích dữ liệu theo một cách dễ hiểu. Nó cũng có thể đề xuất các cách khác nhau để trực quan hóa cùng một dữ liệu.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27064
ArXiv Abstracthttps://arxiv.org/abs/2603.27064
PDF Downloadhttps://arxiv.org/pdf/2603.27064.pdf
Github RepositoryN/A

17. Story2Proposal: A Scaffold for Structured Scientific Paper Writing (10 votes)​

Tác giả: Zhuoyang Qian, Wei Shi, Xu Lin, Li Ling, Meng Luo, Ziming Wang, Zhiwei Zhang, Tengyue Xu, Gaoge Liu, Zhentao Zhang, Shuo Zhang, Ziqi Wang, Zheng Feng, Yan Luo, Shu Xu, Yongjin Chen, Zhibo Feng, Zhuo Chen, Bruce Yuan, Biao Wu, Harry Wang, Kris Chen

Xuất bản lúc: 2026-03-28

Tag: Multi-agent systems, LLMs, Structured Generation, AI-assisted writing, Generative AI

I. Main Problem:​

Việc tạo bản thảo khoa học đòi hỏi duy trì sự nhất quán giữa lập luận, bằng chứng thực nghiệm và các yếu tố hình ảnh xuyên suốt vòng đời tài liệu. Các phương pháp tạo văn bản hiện có dựa trên mô hình ngôn ngữ thường tạo ra sự lệch lạc cấu trúc, thiếu hình ảnh hoặc bảng biểu, và mâu thuẫn giữa các phần, do thiếu cơ chế kiểm soát ngữ nghĩa và theo dõi nguồn gốc thông tin trong các tài liệu dài. Các hệ thống hiện tại gặp khó khăn trong việc duy trì tính gắn kết toàn cầu, tính nhất quán trong lập luận và tính toàn vẹn cấu trúc trên hàng nghìn từ.

II. Main Idea:​

Story2Proposal giới thiệu một khung đa tác nhân được quản lý bằng hợp đồng (contract-governed multi-agent framework) để chuyển đổi một câu chuyện nghiên cứu thành bản thảo có cấu trúc. Hệ thống phối hợp các tác nhân chuyên biệt (kiến trúc sư, người viết, người tinh chỉnh, người kết xuất) hoạt động dưới một "hợp đồng trực quan chia sẻ" (persistent shared visual contract) liên tục. Hợp đồng này theo dõi cấu trúc phần, các yếu tố hình ảnh đã đăng ký và các quy tắc xác thực. Các tác nhân đánh giá cung cấp phản hồi trong một vòng lặp tạo – đánh giá – điều chỉnh (generate–evaluate–adapt loop) để cập nhật trạng thái hợp đồng trong quá trình tạo tài liệu, đảm bảo tính nhất quán về cấu trúc và sự căn chỉnh hình ảnh.

III. Main Results:​

Story2Proposal đạt điểm đánh giá của chuyên gia trung bình là 6.145, cao hơn đáng kể so với DirectChat (3.963) trên các mô hình GPT, Claude, Gemini và Qwen (cải thiện +2.182 điểm). So với baseline có cấu trúc Fars, Story2Proposal cũng cho thấy hiệu suất tốt hơn với điểm trung bình 5.705 so với 5.197 (cải thiện +0.508 điểm). Các kết quả này chứng minh sự cải thiện nhất quán về tính toàn vẹn cấu trúc, độ rõ ràng của mô tả thực nghiệm, độ tin cậy của định dạng và sự căn chỉnh giữa lập luận và các yếu tố hình ảnh trong các bản thảo được tạo ra.

IV. Conclusion & Future Works:​

Story2Proposal là một khung đa tác nhân được quản lý bằng hợp đồng để tạo bản thảo khoa học tự động, cho thấy sự cải thiện đáng kể về tính toàn vẹn cấu trúc, độ ổn định định dạng và giao tiếp hình ảnh so với các phương pháp không ràng buộc và có cấu trúc. Các ràng buộc kiến trúc đóng vai trò trung tâm trong việc xây dựng bản thảo đáng tin cậy. Tuy nhiên, vẫn còn hạn chế về mức độ cải thiện so với các hệ thống dựa trên template như Fars, sự phụ thuộc vào tính đầy đủ của câu chuyện nghiên cứu đầu vào và khả năng của các tác nhân đánh giá trong việc phát hiện các vấn đề lập luận tinh tế. Công việc tương lai bao gồm mở rộng khả năng xác minh mạnh mẽ hơn, cơ chế xác thực theo miền cụ thể, và hỗ trợ lập luận có thể giải thích được trong các hệ thống phân tích tự động.

V. Brainstorming Space:​

1. Publish Papers:​

  1. Nâng cao khả năng xác minh và xác thực theo miền cụ thể: Phát triển các tác nhân đánh giá tiên tiến hơn, sử dụng tín hiệu đánh giá phong phú, mô-đun phê bình chuyên biệt và phân loại rủi ro có cấu trúc để phát hiện các điểm yếu lập luận tinh tế và đảm bảo chất lượng khoa học cao hơn trong tài liệu tự động.
  2. Tích hợp cơ chế truy xuất và xác minh bằng chứng: Thiết kế hệ thống có khả năng mở rộng hoặc xác thực câu chuyện nghiên cứu đầu vào bằng cách tích hợp các cơ chế truy xuất thông tin từ cơ sở dữ liệu học thuật hoặc hệ thống xác minh bằng chứng, nhằm giải quyết vấn đề đầu vào không đầy đủ và làm phong phú nội dung bản thảo.
  3. Phát triển hệ thống hỗ trợ viết AI có khả năng giải thích được (Interpretable AI): Nghiên cứu các phương pháp để làm cho quá trình tạo bản thảo của Story2Proposal minh bạch hơn, cho phép người dùng hiểu rõ các quyết định của tác nhân và lý do đằng sau các thay đổi cấu trúc hoặc nội dung, đặc biệt trong bối cảnh các hệ thống phân tích tự động.

2. Patent:​

  1. Ứng dụng "Trợ lý viết báo cáo thông minh" cho di động: Một ứng dụng di động cho phép người dùng nhập các ý tưởng chính, dữ liệu thô (ví dụ: ảnh chụp biểu đồ, ghi chú) và mục tiêu. Ứng dụng sẽ sử dụng một cơ chế quản lý cấu trúc nội bộ để tự động tạo ra một bản nháp báo cáo có cấu trúc, đảm bảo các phần được sắp xếp hợp lý, hình ảnh được chèn đúng chỗ và được tham chiếu chính xác, đồng thời cung cấp phản hồi để người dùng tinh chỉnh một cách trực quan trên điện thoại.
  2. Hệ thống "Soạn thảo bài đăng mạng xã hội đa phương tiện có kiểm soát cấu trúc": Một tính năng trên ứng dụng mạng xã hội hoặc công cụ tạo nội dung di động giúp người dùng tạo các bài đăng phức tạp (ví dụ: chuỗi bài Twitter, bài đăng blog dài có hình ảnh) với cấu trúc và sự nhất quán được đảm bảo. Người dùng định nghĩa các ý chính, hình ảnh/video muốn chèn, và hệ thống sẽ tạo ra nội dung văn bản, đảm bảo hình ảnh được đề cập đúng cách, các phần không bị lạc đề và tổng thể bài đăng mạch lạc, tối ưu cho việc hiển thị trên thiết bị di động.
  3. Công cụ "Tạo kế hoạch sự kiện/dự án có hình ảnh minh họa" trên di động: Một ứng dụng di động cho phép người dùng nhập các thông tin cơ bản về một sự kiện hoặc dự án (ví dụ: địa điểm, thời gian, danh sách khách mời, ảnh mẫu). Ứng dụng sẽ tự động tạo một kế hoạch chi tiết, có cấu trúc rõ ràng (ví dụ: lịch trình, ngân sách, danh sách công việc), đồng thời chèn và liên kết các hình ảnh minh họa (ví dụ: bản đồ địa điểm, ảnh sản phẩm mẫu) một cách nhất quán và có kiểm soát, giúp người dùng dễ dàng quản lý và chia sẻ kế hoạch trực tiếp từ điện thoại của họ.

Các đường dẫn liên quan​

Nền tảngĐường dẫn
Hugging Facehttps://huggingface.co/papers/2603.27065
ArXiv Abstracthttps://arxiv.org/abs/2603.27065
PDF Downloadhttps://arxiv.org/pdf/2603.27065.pdf
Github RepositoryN/A