Hệ điều hành thế hệ tiếp theo của Apple sẽ có Project Greymatter, mang đến vô số cải tiến liên quan đến AI. Chúng tôi có thông tin chi tiết mới về các tính năng AI được lên kế hoạch cho Siri, Ghi chú và Tin nhắn.
Sau những tuyên bố và báo cáo rộng rãi về các cải tiến liên quan đến AI trong iOS 18, AppleInsider đã nhận được thông tin bổ sung về các kế hoạch của Apple trong lĩnh vực AI.
Những người quen thuộc với vấn đề này đã tiết lộ rằng công ty đang thử nghiệm nội bộ nhiều tính năng mới liên quan đến AI trước WWDC hàng năm . Được biết đến với tên mã dự án là “Greymatter”, các cải tiến AI của công ty sẽ tập trung vào những lợi ích thiết thực cho người dùng cuối.
Trong các phiên bản tiền phát hành của hệ điều hành Apple, công ty đã nghiên cứu tính năng tóm tắt thông báo được gọi là "Greymatter Catch Up". Tính năng này được gắn với Siri , nghĩa là người dùng sẽ có thể yêu cầu và nhận được cái nhìn tổng quan về các thông báo gần đây của họ thông qua trợ lý ảo.
Siri dự kiến sẽ nhận được khả năng tạo phản hồi được cập nhật đáng kể, thông qua khung phản hồi thông minh mới, cũng như LLM trên thiết bị của Apple. Khi tạo câu trả lời và tóm tắt, Siri sẽ có thể tính đến các thực thể như con người và công ty, sự kiện trên lịch, địa điểm, ngày tháng, v.v.
Trong các báo cáo trước đây của chúng tôi về Safari 18 , Ajax LLM và ứng dụng Voice Memos được cập nhật , AppleInsider đã tiết lộ rằng Apple có kế hoạch giới thiệu tính năng tóm tắt và phiên âm văn bản được hỗ trợ bởi AI cho các ứng dụng tích hợp sẵn của mình. Kể từ đó, chúng tôi được biết rằng công ty cũng có ý định đưa những tính năng này vào Siri.
Điều này cuối cùng có nghĩa là Siri sẽ có thể trả lời các truy vấn trên thiết bị, tạo bản tóm tắt các bài viết dài hoặc chép lại âm thanh như trong các ứng dụng Ghi chú hoặc Ghi nhớ giọng nói được cập nhật. Tất cả điều này sẽ được thực hiện thông qua việc sử dụng Ajax LLM hoặc xử lý dựa trên đám mây cho các tác vụ phức tạp hơn.
Chúng tôi cũng được biết rằng Apple đã thử nghiệm giọng nói nâng cao và "tự nhiên hơn", cùng với các cải tiến về chuyển văn bản thành giọng nói, điều này cuối cùng sẽ mang lại trải nghiệm người dùng tốt hơn đáng kể.
Apple cũng đang nghiên cứu các phương tiện điều khiển TV và phương tiện đa thiết bị cho Siri. Ví dụ: tính năng này sẽ cho phép ai đó sử dụng Siri trên Apple Watch của họ để phát nhạc trên một thiết bị khác, mặc dù tính năng này sẽ không được mong đợi cho đến cuối năm 2024.
Công ty đã quyết định nhúng trí tuệ nhân tạo vào một số ứng dụng hệ thống cốt lõi của mình, phù hợp với các trường hợp và nhiệm vụ sử dụng khác nhau. Một lĩnh vực cải tiến đáng chú ý liên quan đến chỉnh sửa ảnh.
Apple đã phát triển phần mềm AI tổng quát để cải thiện việc chỉnh sửa hình ảnh
iOS 18 và macOS 15 dự kiến sẽ mang đến các tùy chọn chỉnh sửa ảnh được hỗ trợ bởi AI cho các ứng dụng như Photos. Trong nội bộ, Apple đã phát triển tính năng Clean Up mới, cho phép người dùng xóa các đối tượng khỏi hình ảnh thông qua việc sử dụng phần mềm AI tổng hợp.
Cũng liên quan đến Project Greymatter, công ty đã tạo ra một ứng dụng sử dụng nội bộ được gọi là "Sân chơi sáng tạo". Những người quen thuộc với ứng dụng này tiết lộ riêng với AppleInsider rằng nó có thể sử dụng phần mềm AI tổng hợp của Apple để tạo và chỉnh sửa hình ảnh, đồng thời nó có tính năng tích hợp iMessage dưới dạng tiện ích mở rộng ứng dụng chuyên dụng.
Trong môi trường thử nghiệm của Apple, có thể tạo hình ảnh thông qua trí tuệ nhân tạo và sau đó gửi nó đi qua iMessage. Có dấu hiệu cho thấy công ty có kế hoạch đưa ra một tính năng tương tự cho người dùng cuối hệ điều hành của mình.
Thông tin này phù hợp với một báo cáo khác tuyên bố rằng người dùng sẽ có thể sử dụng AI để tạo biểu tượng cảm xúc độc đáo, mặc dù có các khả năng bổ sung cho các tính năng tạo hình ảnh.
Theo những người quen thuộc với vấn đề này, các phiên bản tiền phát hành của ứng dụng Notes của Apple cũng chứa các tham chiếu đến Generation Tool, mặc dù không rõ liệu công cụ này có tạo ra văn bản hoặc hình ảnh hay không - như trường hợp của ứng dụng Generative Playground.
Ghi chú sẽ nhận được bản ghi chép và tóm tắt do AI cung cấp, cùng với Ghi chú Toán học
Apple đã chuẩn bị những cải tiến đáng kể cho ứng dụng Ghi chú tích hợp của mình, chuẩn bị ra mắt cùng với iOS 18 và macOS 15. Ghi chú được cập nhật sẽ nhận được hỗ trợ ghi âm trong ứng dụng, phiên âm âm thanh và tóm tắt do LLM cung cấp.
Tất cả các bản ghi âm, phiên âm và tóm tắt dựa trên văn bản đều sẽ có sẵn trong một ghi chú, cùng với bất kỳ tài liệu nào khác mà người dùng chọn thêm. Điều này có nghĩa là một ghi chú có thể chứa bản ghi âm toàn bộ bài giảng hoặc cuộc họp, kèm theo hình ảnh và văn bản trên bảng trắng.
Những tính năng này sẽ biến Notes thành một công cụ mạnh mẽ thực sự, khiến nó trở thành ứng dụng phù hợp cho sinh viên cũng như các chuyên gia kinh doanh. Việc bổ sung các tính năng phiên âm và tóm tắt âm thanh cũng sẽ cho phép ứng dụng Ghi chú của Apple có vị trí tốt hơn trước các dịch vụ của đối thủ như OneNote hoặc Otter của Microsoft.
Mặc dù hỗ trợ ghi âm ở cấp ứng dụng, cùng với các tính năng tóm tắt và sao chép âm thanh được hỗ trợ bởi AI sẽ cải thiện đáng kể ứng dụng Ghi chú - chúng không phải là điều duy nhất Apple đang nghiên cứu.
Ghi chú toán học - tạo đồ thị và giải phương trình thông qua việc sử dụng AI
Ứng dụng Ghi chú sẽ nhận được một bổ sung hoàn toàn mới dưới dạng Ghi chú Toán học, sẽ mở ra sự hỗ trợ cho ký hiệu toán học thích hợp và cho phép tích hợp với ứng dụng Máy tính GreyParrot mới của Apple . Bây giờ chúng ta đã có thêm thông tin chi tiết về những gì Math Notes sẽ yêu cầu.
Những người quen thuộc với tính năng mới đã tiết lộ rằng Math Notes sẽ cho phép ứng dụng nhận dạng văn bản dưới dạng phương trình toán học và đưa ra giải pháp cho chúng. Hỗ trợ cho các biểu thức vẽ đồ thị cũng đang được thực hiện, có nghĩa là chúng ta có thể thấy một cái gì đó tương tự như ứng dụng Grapher trên macOS , nhưng trong Ghi chú.
Apple cũng đang nghiên cứu các cải tiến tập trung vào đầu vào liên quan đến toán học, dưới dạng một tính năng được gọi là "Dự đoán toán học trên bàn phím". AppleInsider được biết rằng tính năng này sẽ cho phép hoàn thành các biểu thức toán học bất cứ khi nào chúng được nhận dạng dưới dạng nhập văn bản một phần.
Điều này có nghĩa là, trong Notes, người dùng sẽ nhận được tùy chọn tự động hoàn thành các phương trình toán học của họ theo cách tương tự như cách Apple hiện cung cấp văn bản dự đoán hoặc hoàn thành nội tuyến trên iOS - tính năng này cũng dự kiến sẽ được đưa lên VisionOS vào cuối năm nay.
VisionOS của Apple cũng sẽ cải thiện khả năng tích hợp với Transformer LM của Apple - mô hình văn bản dự đoán cung cấp các đề xuất khi bạn nhập. Hệ điều hành này cũng dự kiến sẽ nhận được giao diện người dùng Lệnh thoại được thiết kế lại, đóng vai trò như một chỉ báo cho biết Apple đánh giá cao những cải tiến liên quan đến đầu vào đến mức nào.
Công ty cũng đang tìm cách cải thiện đầu vào của người dùng thông qua việc sử dụng cái gọi là "trả lời thông minh", sẽ có sẵn trong Tin nhắn, Thư và Siri. Điều này sẽ cho phép người dùng trả lời tin nhắn hoặc email bằng các phản hồi dựa trên văn bản cơ bản được tạo ngay lập tức bởi Ajax LLM trên thiết bị của Apple.
AI của Apple so với Google Gemini và các sản phẩm của bên thứ ba khác
AI đã xâm nhập vào hầu hết mọi ứng dụng và thiết bị. Việc sử dụng các sản phẩm tập trung vào AI như ChatGPT của OpenAI và Google Gemini cũng đã chứng kiến sự gia tăng đáng kể về mức độ phổ biến nói chung.
AppleInsider đã học được rằng mặc dù Apple đã phát triển phần mềm AI của riêng mình để có vị trí tốt hơn trước các đối thủ , nhưng AI của công ty gần như không ấn tượng bằng những thứ như Google Gemini Advanced .
Trong hội nghị nhà phát triển Google I/O thường niên vào ngày 14 tháng 5, Google đã giới thiệu một trường hợp sử dụng thú vị dành cho trí tuệ nhân tạo - nơi người dùng có thể đặt câu hỏi dưới dạng video và nhận được phản hồi hoặc đề xuất do AI tạo ra.
Là một phần của sự kiện, AI của Google đã được xem một đoạn video về một máy ghi âm bị hỏng và hỏi tại sao nó không hoạt động. Phần mềm đã xác định kiểu máy ghi âm và đề xuất rằng máy ghi âm có thể không được cân bằng chính xác và do đó nó không hoạt động.
Công ty cũng công bố Google Veo - phần mềm có thể tạo video thông qua việc sử dụng trí tuệ nhân tạo. OpenAI cũng có mô hình tạo video riêng được gọi là Sora .
Project Greymatter và Ajax LLM của Apple không thể tạo hoặc xử lý video, nghĩa là phần mềm của công ty không thể trả lời các câu hỏi video phức tạp về sản phẩm tiêu dùng. Đây có thể là lý do tại sao Apple tìm cách hợp tác với các công ty như Google và OpenAI để đạt được thỏa thuận cấp phép và cung cấp nhiều tính năng hơn cho cơ sở người dùng của mình.
So với các sản phẩm có chủ đề AI vật lý, chẳng hạn như Humane AI Pin hay Rabbit R1, các dự án AI của Apple có lợi thế đáng kể ở chỗ chúng chạy trên các thiết bị mà người dùng đã sở hữu. Điều này có nghĩa là người dùng sẽ không phải mua một thiết bị AI đặc biệt để tận hưởng những lợi ích của trí tuệ nhân tạo.
AI Pin và Rabbit R1 của Humane cũng thường được coi là những sản phẩm chưa hoàn thiện hoặc chỉ có một phần chức năng, và sản phẩm sau này thậm chí còn được tiết lộ là không khác gì một ứng dụng Android tùy chỉnh.
Các dự án liên quan đến AI của Apple dự kiến sẽ ra mắt tại WWDC thường niên của công ty vào ngày 10 tháng 6, như một phần của iOS 18 và macOS 15. Các bản cập nhật cho các ứng dụng Lịch , Freeform và Cài đặt hệ thống cũng đang được thực hiện.
