Granite 4.2 8B là mô hình suy luận cỡ trung của IBM thuộc họ Granite 4.2. Mô hình transformer 8 tỷ tham số có kiến trúc dày đặc và chỉ gồm bộ giải mã, được hậu huấn luyện từ Granite 4.1 8B Base để suy luận, sinh mã, làm theo chỉ dẫn và làm việc có công cụ hướng dẫn. Mô hình nhận và tạo văn bản, có khối tư duy trung gian trong chế độ suy luận và câu trả lời cuối riêng biệt.
Nhà sản xuất mô tả cơ chế chú ý truy vấn theo nhóm, mã hóa vị trí rotary, lớp truyền thẳng SwiGLU và chuẩn hóa RMS. Mô hình hỗ trợ ngữ cảnh gốc 128K và có tài liệu mở rộng ngữ cảnh dài lên 512K. Đây là cấu hình khác nhau: con số mở rộng không nên thay thế thiết lập gốc trong tác vụ dùng biến thể tiêu chuẩn. Hội thoại, tài liệu nguồn, kết quả công cụ và nội dung sinh phải vừa ngữ cảnh đã chọn.
Tư duy đầy đủ là mặc định của nhà sản xuất, phát triển phân tích trước câu trả lời. Không tư duy trả câu trả lời trực tiếp. Chế độ suy luận ở mức thấp dùng quá trình suy luận ngắn hơn cho câu hỏi đơn giản. Mẫu của nhà sản xuất biểu diễn các lựa chọn khác nhau và tách nội dung bên trong dấu tư duy khỏi kết luận cuối.
Với phân tích toán hoặc mã, cung cấp đầy đủ điều kiện, định nghĩa và ràng buộc, rồi nêu kết quả cuối cần nhận. Yêu cầu thực dụng là: “Xác định vì sao hàm này thất bại với đầu vào đã cho, giải thích điều kiện gây lỗi và đề xuất sửa đổi có trọng tâm.” Tác vụ trích xuất thường lệ có thể chỉ yêu cầu các trường cần thiết. Chọn chế độ phù hợp với độ sâu tác vụ mà không để phân tích trung gian thay thế sản phẩm yêu cầu.
IBM khuyến nghị temperature 1.0 và top-p 0.95 cho các chế độ và tác vụ tham chiếu. Ví dụ ngân sách sinh là 8.192 token mới cho tư duy và 2.048 cho phản hồi trực tiếp; thẻ cho phép rõ ngân sách lớn hơn với suy luận phức tạp. Đây là hướng dẫn cấu hình, không phải trần đầu ra cứng được xác lập độc lập.
Mẫu nhiều lượt mặc định loại tư duy khỏi các lượt trợ lý trước để tiết kiệm ngữ cảnh. Nhà sản xuất cũng hướng dẫn giữ lại khi cần toàn bộ lịch sử suy luận. Giữ câu trả lời cuối và quan sát hữu ích rõ ràng để lượt tiếp theo sửa đúng phần mà không nhầm ý nghĩ trung gian trước đó với phát hiện được chấp nhận.
Mô hình có thể suy luận nên gọi hàm nào trong số được cung cấp và trả nội dung lời gọi công cụ có cấu trúc. Định nghĩa công cụ bằng tên có ý nghĩa, mô tả và lược đồ tham số. Ứng dụng thực hiện thao tác được chọn và trả quan sát; tác vụ tiếp diễn cần dùng kết quả thực tế đó. Với tác tử lập trình, chỉ rõ tệp được phép và hành vi xác định hoàn thành thay đổi, rồi yêu cầu triển khai cùng quan sát xác thực hỗ trợ.
Thẻ liệt kê mười hai ngôn ngữ đã kiểm thử. Đặt ngôn ngữ trả lời và giữ tên riêng hoặc mã định danh trong mã. Huấn luyện chủ yếu bằng tiếng Anh cùng dữ liệu đa ngôn ngữ nên hiệu năng ngôn ngữ khác có thể thay đổi; vài ví dụ liên quan có thể làm rõ tác vụ và phong cách đầu ra dự định.
IBM lưu ý mô hình vẫn có thể tạo câu trả lời sai hoặc thiên lệch, và nội dung tư duy có thể gồm ý tưởng trung gian chưa trau chuốt. Đối chiếu phản hồi cuối với nguồn cung cấp, kiểm tra trích xuất số và xem mã trong ứng dụng dự định. Kết quả hữu ích là câu trả lời, sản phẩm mã hoặc bản ghi phân tích có bằng chứng và thông tin chưa giải quyết được nêu rõ, đồng thời giữ đúng phiên bản 4.2 8B cùng khác biệt chế độ.
", "aboutText": "Granite 4.2 8B là mô hình suy luận cỡ trung của IBM thuộc họ Granite 4.2. Mô hình transformer 8 tỷ tham số có kiến trúc dày đặc và chỉ gồm bộ giải mã, được hậu huấn luyện từ Granite 4.1 8B Base để suy luận, sinh mã, làm theo chỉ dẫn và làm việc có công cụ hướng dẫn. Mô hình nhận và tạo văn bản, có khối tư duy trung gian trong chế độ suy luận và câu trả lời cuối riêng biệt.\n\n### Thiết kế mô hình và ngữ cảnh\n\nNhà sản xuất mô tả cơ chế chú ý truy vấn theo nhóm, mã hóa vị trí rotary, lớp truyền thẳng SwiGLU và chuẩn hóa RMS. Mô hình hỗ trợ ngữ cảnh gốc 128K và có tài liệu mở rộng ngữ cảnh dài lên 512K. Đây là cấu hình khác nhau: con số mở rộng không nên thay thế thiết lập gốc trong tác vụ dùng biến thể tiêu chuẩn. Hội thoại, tài liệu nguồn, kết quả công cụ và nội dung sinh phải vừa ngữ cảnh đã chọn.\n\n### Ba chế độ tư duy\n\nTư duy đầy đủ là mặc định của nhà sản xuất, phát triển phân tích trước câu trả lời. Không tư duy trả câu trả lời trực tiếp. Chế độ suy luận ở mức thấp dùng quá trình suy luận ngắn hơn cho câu hỏi đơn giản. Mẫu của nhà sản xuất biểu diễn các lựa chọn khác nhau và tách nội dung bên trong dấu tư duy khỏi kết luận cuối.\n\nVới phân tích toán hoặc mã, cung cấp đầy đủ điều kiện, định nghĩa và ràng buộc, rồi nêu kết quả cuối cần nhận. Yêu cầu thực dụng là: “Xác định vì sao hàm này thất bại với đầu vào đã cho, giải thích điều kiện gây lỗi và đề xuất sửa đổi có trọng tâm.” Tác vụ trích xuất thường lệ có thể chỉ yêu cầu các trường cần thiết. Chọn chế độ phù hợp với độ sâu tác vụ mà không để phân tích trung gian thay thế sản phẩm yêu cầu.\n\n### Hướng dẫn hội thoại và sinh nội dung\n\nIBM khuyến nghị temperature 1.0 và top-p 0.95 cho các chế độ và tác vụ tham chiếu. Ví dụ ngân sách sinh là 8.192 token mới cho tư duy và 2.048 cho phản hồi trực tiếp; thẻ cho phép rõ ngân sách lớn hơn với suy luận phức tạp. Đây là hướng dẫn cấu hình, không phải trần đầu ra cứng được xác lập độc lập.\n\nMẫu nhiều lượt mặc định loại tư duy khỏi các lượt trợ lý trước để tiết kiệm ngữ cảnh. Nhà sản xuất cũng hướng dẫn giữ lại khi cần toàn bộ lịch sử suy luận. Giữ câu trả lời cuối và quan sát hữu ích rõ ràng để lượt tiếp theo sửa đúng phần mà không nhầm ý nghĩ trung gian trước đó với phát hiện được chấp nhận.\n\n### Lời gọi công cụ và sản phẩm thực dụng\n\nMô hình có thể suy luận nên gọi hàm nào trong số được cung cấp và trả nội dung lời gọi công cụ có cấu trúc. Định nghĩa công cụ bằng tên có ý nghĩa, mô tả và lược đồ tham số. Ứng dụng thực hiện thao tác được chọn và trả quan sát; tác vụ tiếp diễn cần dùng kết quả thực tế đó. Với tác tử lập trình, chỉ rõ tệp được phép và hành vi xác định hoàn thành thay đổi, rồi yêu cầu triển khai cùng quan sát xác thực hỗ trợ.\n\nThẻ liệt kê mười hai ngôn ngữ đã kiểm thử. Đặt ngôn ngữ trả lời và giữ tên riêng hoặc mã định danh trong mã. Huấn luyện chủ yếu bằng tiếng Anh cùng dữ liệu đa ngôn ngữ nên hiệu năng ngôn ngữ khác có thể thay đổi; vài ví dụ liên quan có thể làm rõ tác vụ và phong cách đầu ra dự định.\n\n### Giới hạn và diễn giải\n\nIBM lưu ý mô hình vẫn có thể tạo câu trả lời sai hoặc thiên lệch, và nội dung tư duy có thể gồm ý tưởng trung gian chưa trau chuốt. Đối chiếu phản hồi cuối với nguồn cung cấp, kiểm tra trích xuất số và xem mã trong ứng dụng dự định. Kết quả hữu ích là câu trả lời, sản phẩm mã hoặc bản ghi phân tích có bằng chứng và thông tin chưa giải quyết được nêu rõ, đồng thời giữ đúng phiên bản 4.2 8B cùng khác biệt chế độ.", "editorialOverlay": { "copy_fields": { "practical_html": "Ví dụ kỹ thuật bằng tiếng Anh
Fix a mutable default argument\n\nExplain why this Python function shares results across calls and propose a correction: def collect(value, items=[]): items.append(value); return items. The caller may supply an existing list and expects it to be updated. Include tests for two omitted-list calls and one explicitly supplied list. Preserve the function name and calling convention.A corrected collect function, a brief cause explanation and tests distinguishing default-list isolation from explicit-list mutation.Check that omitted-list calls return independent lists while an explicitly supplied list is still updated.ibm-granite/granite-4.2-8bGranite 4.2 8B là mô hình suy luận văn bản có kiến trúc dày đặc của IBM dành cho toán học, lập trình, hội thoại đa ngôn ngữ và tác tử có công cụ hướng dẫn. Mô hình cung cấp các chế độ suy luận đầy đủ, trả lời trực tiếp và suy luận ở mức thấp, với ngữ cảnh gốc 128K và phần mở rộng ngữ cảnh dài được tài liệu mô tả riêng.
Mô tả này trình bày khả năng của mô hình. Đầu vào, đầu ra và tùy chọn có trên Ailoot được liệt kê bên dưới cho phương thức đã chọn.
Granite 4.2 8B là mô hình suy luận cỡ trung của IBM thuộc họ Granite 4.2. Mô hình transformer 8 tỷ tham số có kiến trúc dày đặc và chỉ gồm bộ giải mã, được hậu huấn luyện từ Granite 4.1 8B Base để suy luận, sinh mã, làm theo chỉ dẫn và làm việc có công cụ hướng dẫn. Mô hình nhận và tạo văn bản, có khối tư duy trung gian trong chế độ suy luận và câu trả lời cuối riêng biệt.
Nhà sản xuất mô tả cơ chế chú ý truy vấn theo nhóm, mã hóa vị trí rotary, lớp truyền thẳng SwiGLU và chuẩn hóa RMS. Mô hình hỗ trợ ngữ cảnh gốc 128K và có tài liệu mở rộng ngữ cảnh dài lên 512K. Đây là cấu hình khác nhau: con số mở rộng không nên thay thế thiết lập gốc trong tác vụ dùng biến thể tiêu chuẩn. Hội thoại, tài liệu nguồn, kết quả công cụ và nội dung sinh phải vừa ngữ cảnh đã chọn.
Tư duy đầy đủ là mặc định của nhà sản xuất, phát triển phân tích trước câu trả lời. Không tư duy trả câu trả lời trực tiếp. Chế độ suy luận ở mức thấp dùng quá trình suy luận ngắn hơn cho câu hỏi đơn giản. Mẫu của nhà sản xuất biểu diễn các lựa chọn khác nhau và tách nội dung bên trong dấu tư duy khỏi kết luận cuối.
Với phân tích toán hoặc mã, cung cấp đầy đủ điều kiện, định nghĩa và ràng buộc, rồi nêu kết quả cuối cần nhận. Yêu cầu thực dụng là: “Xác định vì sao hàm này thất bại với đầu vào đã cho, giải thích điều kiện gây lỗi và đề xuất sửa đổi có trọng tâm.” Tác vụ trích xuất thường lệ có thể chỉ yêu cầu các trường cần thiết. Chọn chế độ phù hợp với độ sâu tác vụ mà không để phân tích trung gian thay thế sản phẩm yêu cầu.
IBM khuyến nghị temperature 1.0 và top-p 0.95 cho các chế độ và tác vụ tham chiếu. Ví dụ ngân sách sinh là 8.192 token mới cho tư duy và 2.048 cho phản hồi trực tiếp; thẻ cho phép rõ ngân sách lớn hơn với suy luận phức tạp. Đây là hướng dẫn cấu hình, không phải trần đầu ra cứng được xác lập độc lập.
Mẫu nhiều lượt mặc định loại tư duy khỏi các lượt trợ lý trước để tiết kiệm ngữ cảnh. Nhà sản xuất cũng hướng dẫn giữ lại khi cần toàn bộ lịch sử suy luận. Giữ câu trả lời cuối và quan sát hữu ích rõ ràng để lượt tiếp theo sửa đúng phần mà không nhầm ý nghĩ trung gian trước đó với phát hiện được chấp nhận.
Mô hình có thể suy luận nên gọi hàm nào trong số được cung cấp và trả nội dung lời gọi công cụ có cấu trúc. Định nghĩa công cụ bằng tên có ý nghĩa, mô tả và lược đồ tham số. Ứng dụng thực hiện thao tác được chọn và trả quan sát; tác vụ tiếp diễn cần dùng kết quả thực tế đó. Với tác tử lập trình, chỉ rõ tệp được phép và hành vi xác định hoàn thành thay đổi, rồi yêu cầu triển khai cùng quan sát xác thực hỗ trợ.
Thẻ liệt kê mười hai ngôn ngữ đã kiểm thử. Đặt ngôn ngữ trả lời và giữ tên riêng hoặc mã định danh trong mã. Huấn luyện chủ yếu bằng tiếng Anh cùng dữ liệu đa ngôn ngữ nên hiệu năng ngôn ngữ khác có thể thay đổi; vài ví dụ liên quan có thể làm rõ tác vụ và phong cách đầu ra dự định.
IBM lưu ý mô hình vẫn có thể tạo câu trả lời sai hoặc thiên lệch, và nội dung tư duy có thể gồm ý tưởng trung gian chưa trau chuốt. Đối chiếu phản hồi cuối với nguồn cung cấp, kiểm tra trích xuất số và xem mã trong ứng dụng dự định. Kết quả hữu ích là câu trả lời, sản phẩm mã hoặc bản ghi phân tích có bằng chứng và thông tin chưa giải quyết được nêu rõ, đồng thời giữ đúng phiên bản 4.2 8B cùng khác biệt chế độ.
POST /v1/chat/completionstexttext| Trường | Loại | Yêu cầu | Giá trị & giới hạn | Mặc định |
|---|---|---|---|---|
Trườngmodel | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn ibm-granite/granite-4.2-8b | Mặc định— |
Trườngmessages | Loạimessage[] | Yêu cầuBắt buộc | Giá trị & giới hạn Số mục tối thiểu: 1 | Mặc định— |
Trườngmessages[].role | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn Ví dụ: system, user, assistant, tool, function Điều kiện: Các vai trò này được biểu diễn rõ trong các kiểu tương thích của mã nguồn; tập vai trò chính xác vẫn tùy từng mô hình. Tùy thuộc vào mô hình | Mặc định— |
Trườngmessages[].content | Loạistring|content_part[]|null | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngmessages[].tool_calls | Loạitool_call[] | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngmessages[].tool_call_id | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Áp dụng khi: role=tool; dùng ID thực tế được trả về | Mặc định— |
Trườngmessages[].name | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngmessages[].reasoning_content | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Áp dụng khi: Gửi lại dữ liệu suy luận thực tế đã được trả về khi mô hình này sử dụng dữ liệu đó | Mặc định— |
Trườngmessages[].reasoning_details | Loạiobject|array | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngmax_tokens | Loạiinteger | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tối thiểu: 1 Tùy thuộc vào mô hình | Mặc định— |
Trườngmax_completion_tokens | Loạiinteger | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tối thiểu: 1 Tùy thuộc vào mô hình | Mặc định— |
Trườngstream | Loạiboolean | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc địnhfalse |
Trườngstream_options.include_usage | Loạiboolean | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngtemperature | Loạinumber | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngtop_p | Loạinumber | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngstop | Loạistring|string[] | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngtools | Loạifunction_tool[] | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngtools[].type | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn function Tùy thuộc vào mô hình | Mặc định— |
Trườngtools[].function.name | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn Áp dụng khi: Có cung cấp công cụ hàm | Mặc định— |
Trườngtools[].function.description | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngtools[].function.parameters | LoạiJSON_schema | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngtool_choice | Loạistring|object | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngparallel_tool_calls | Loạiboolean | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngresponse_format | Loạiobject | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngreasoning_effort | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngreasoning | Loạiobject | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngservice_tier | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườnginstructions | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Trường tương thích | Mặc định— |
Trườngfunctions | Loạifunction[] | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngfunction_call | Loạistring|object | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngprompt_cache_options | Loạiobject | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Tùy thuộc vào mô hình | Mặc định— |
Trườngmodalities | Loạistring[] | Yêu cầuKhông bắt buộc | Giá trị & giới hạn text | Mặc định— |
Trườngprovider | Loạiobject | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Điều kiện: provider.options bị từ chối trên tuyến văn bản Ultra này | Mặc định— |
Trườngcache_control.ttl | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn Điều kiện: 1h bị từ chối tại các vị trí lưu đệm prompt thực tế | Mặc định— |
Văn bản · Văn bản UTF8
messages[].content
| Tham số | Hợp đồng |
|---|---|
Tham sốcontent_type | Hợp đồngapplication/json |
Tham sốrequired | Hợp đồngmodel, messages |
Tham sốmaterial_types | Hợp đồngtext |
Tham sốmessages | Hợp đồngMảng thông điệp có cấu trúc role/content |
Tham sốfile_material | Hợp đồngTài liệu UTF-8 thực tế được chèn nguyên dạng văn bản; không suy ra ID tệp |
Tham sốoptional_controls | Hợp đồngstream, temperature, top_p, stop, max_tokens, max_completion_tokens, reasoning, response_format, tools, tool_choice |
Tham sốcontrol_scope | Hợp đồngTùy từng mô hình; công cụ hàm của người dùng khác với công cụ do dịch vụ cung cấp |
Tham sốoutput_modalities | Hợp đồngtext |
Tham sốhosted_operations | Hợp đồngfalse |
Tham sốmultimodal_input_binding | Hợp đồngnull |
Vòng đời: synchronous_or_streamed
Gửi ID mô hình chính xác cùng messages.
Độ dài ngữ cảnh không phải giới hạn đầu ra.
Tệp văn bản có thể cung cấp nguyên văn nội dung; đầu vào hình ảnh, âm thanh hoặc đối tượng tệp cần có liên kết chính xác.
Thông tin biểu giá không bổ sung tùy chọn yêu cầu. Các tham số được hỗ trợ nằm trong phương thức đã chọn.
Đối chiếu từng khoản phí với điều kiện hiển thị. Dùng một mức phí cho mỗi nhóm cấu hình thay thế.
| Cấu hình | Biểu mức phí | Token ngữ cảnh, lớn hơn | Token ngữ cảnh, tối đa và bao gồm | Phí |
|---|---|---|---|---|
| Cấu hìnhGiá cơ sở cho token | Biểu mức phíMức phí cơ bản | Token ngữ cảnh, lớn hơn— | Token ngữ cảnh, tối đa và bao gồmKhông có giới hạn trên | Phí Đầu vào · Token đầu vào $0.0002 / 1K token Đầu ra · Token đầu ra $0.0003 / 1K token Đầu vào · Đọc bộ nhớ đệm $0.0001 / 1K token Đầu vào · Ghi bộ nhớ đệm — / 1K token Đầu vào · Ghi bộ nhớ đệm, 1 giờ — / 1K token |
| Cấu hìnhBậc 1 theo độ dài yêu cầu | Biểu mức phí— | Token ngữ cảnh, lớn hơn0 | Token ngữ cảnh, tối đa và bao gồmKhông có giới hạn trên | Phí Đầu vào · Token đầu vào $0.0002 / 1K token Đầu ra · Token đầu ra $0.0003 / 1K token Đầu vào · Đọc bộ nhớ đệm $0.0001 / 1K token Đầu vào · Ghi bộ nhớ đệm — / 1K token Đầu vào · Ghi bộ nhớ đệm, 1 giờ — / 1K token |
Ailoot tạm giữ một khoản ước tính trước yêu cầu. Sau khi có kết quả, phí cuối cùng được quyết toán theo mức sử dụng đo được. Việc quyết toán khi truyền luồng dùng bản ghi mức sử dụng cuối cùng. Cách hoạt động của cơ chế tạm giữ và quyết toán →
set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\npython3 - <<'PY_REQUEST'\nimport json,os\nfrom pathlib import Path\np=json.loads('{"model": "ibm-granite/granite-4.2-8b", "messages": [{"role": "user", "content": "Explain the difference between an observation and a hypothesis in three sentences."}]}')\n\nPath("request.json").write_text(json.dumps(p,ensure_ascii=False))\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/chat/completions \\\n -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\nr=json.loads(Path("result.json").read_text())\nfor x in r.get("choices",[]):\n if x.get("message",{}).get("content"): print(x["message"]["content"])\nPY_RESULT\nfrom openai import OpenAI\nimport os\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nresult=client.chat.completions.create(model='ibm-granite/granite-4.2-8b',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}])\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nsave_result(result.to_dict(mode="json"))\nfrom openai import OpenAI\nimport os\nfrom pathlib import Path\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nwith client.chat.completions.stream(model='ibm-granite/granite-4.2-8b',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}]) as stream:\n with Path("stream-events.jsonl").open("w",encoding="utf-8") as log:\n for event in stream:\n payload=event.to_dict(mode="json")\n log.write(json.dumps(payload,ensure_ascii=False)+"\\n"); log.flush()\n print(json.dumps(payload,ensure_ascii=False))\n final=stream.get_final_completion()\n save_result(final.to_dict(mode="json"),"stream-result")\njson hoặc SSE
Lưu mọi phản hồi hoàn chỉnh, tệp và phần nội dung được trả về.
Giữ mọi phương án trả lời cùng nội dung, lệnh gọi công cụ và dữ liệu suy luận của phương án đó. Với SSE, ghép các phần thay đổi theo chỉ số phương án và công cụ, giữ lý do kết thúc cuối cùng cùng dữ liệu sử dụng.
Giữ ID và header của yêu cầu, phản hồi. Không cung cấp URL chung để truy xuất tác vụ văn bản.
| Trường | Loại |
|---|---|
Trườngchoices[].index | Loạiinteger |
Trườngchoices[].message.content | Loạistring|null |
Trườngchoices[].message.tool_calls | Loạitool_call[] |
Trườngchoices[].message.reasoning_content | Loạistring |
Trườngchoices[].message.reasoning_details | Loạiobject|array |
Trườngchoices[].finish_reason | Loạistring|null |
Trườngusage | Loạiobject |
| Phản hồi | Điều kiện | Bước tiếp theo |
|---|---|---|
Phản hồi400 · invalid_request_error | Điều kiệnTrường bắt buộc, cách biểu diễn tài liệu hoặc giá trị tham số không hợp lệ | Bước tiếp theoSửa các trường được chỉ ra trước khi gửi yêu cầu tạo mới. |
Ailoot Ultra ibm-granite/granite-4.2-8b
Dùng các đường dẫn phương thức hiển thị ở trên.
ibm-granite/granite-4.2-8bGranite 4.2 8B là mô hình suy luận văn bản có kiến trúc dày đặc của IBM dành cho toán học, lập trình, hội thoại đa ngôn ngữ và tác tử có công cụ hướng dẫn. Mô hình cung cấp các chế độ suy luận đầy đủ, trả lời trực tiếp và suy luận ở mức thấp, với ngữ cảnh gốc 128K và phần mở rộng ngữ cảnh dài được tài liệu mô tả riêng.
Mô tả này trình bày khả năng của mô hình. Đầu vào, đầu ra và tùy chọn có trên Ailoot được liệt kê bên dưới cho phương thức đã chọn.
Granite 4.2 8B là mô hình suy luận cỡ trung của IBM thuộc họ Granite 4.2. Mô hình transformer 8 tỷ tham số có kiến trúc dày đặc và chỉ gồm bộ giải mã, được hậu huấn luyện từ Granite 4.1 8B Base để suy luận, sinh mã, làm theo chỉ dẫn và làm việc có công cụ hướng dẫn. Mô hình nhận và tạo văn bản, có khối tư duy trung gian trong chế độ suy luận và câu trả lời cuối riêng biệt.
Nhà sản xuất mô tả cơ chế chú ý truy vấn theo nhóm, mã hóa vị trí rotary, lớp truyền thẳng SwiGLU và chuẩn hóa RMS. Mô hình hỗ trợ ngữ cảnh gốc 128K và có tài liệu mở rộng ngữ cảnh dài lên 512K. Đây là cấu hình khác nhau: con số mở rộng không nên thay thế thiết lập gốc trong tác vụ dùng biến thể tiêu chuẩn. Hội thoại, tài liệu nguồn, kết quả công cụ và nội dung sinh phải vừa ngữ cảnh đã chọn.
Tư duy đầy đủ là mặc định của nhà sản xuất, phát triển phân tích trước câu trả lời. Không tư duy trả câu trả lời trực tiếp. Chế độ suy luận ở mức thấp dùng quá trình suy luận ngắn hơn cho câu hỏi đơn giản. Mẫu của nhà sản xuất biểu diễn các lựa chọn khác nhau và tách nội dung bên trong dấu tư duy khỏi kết luận cuối.
Với phân tích toán hoặc mã, cung cấp đầy đủ điều kiện, định nghĩa và ràng buộc, rồi nêu kết quả cuối cần nhận. Yêu cầu thực dụng là: “Xác định vì sao hàm này thất bại với đầu vào đã cho, giải thích điều kiện gây lỗi và đề xuất sửa đổi có trọng tâm.” Tác vụ trích xuất thường lệ có thể chỉ yêu cầu các trường cần thiết. Chọn chế độ phù hợp với độ sâu tác vụ mà không để phân tích trung gian thay thế sản phẩm yêu cầu.
IBM khuyến nghị temperature 1.0 và top-p 0.95 cho các chế độ và tác vụ tham chiếu. Ví dụ ngân sách sinh là 8.192 token mới cho tư duy và 2.048 cho phản hồi trực tiếp; thẻ cho phép rõ ngân sách lớn hơn với suy luận phức tạp. Đây là hướng dẫn cấu hình, không phải trần đầu ra cứng được xác lập độc lập.
Mẫu nhiều lượt mặc định loại tư duy khỏi các lượt trợ lý trước để tiết kiệm ngữ cảnh. Nhà sản xuất cũng hướng dẫn giữ lại khi cần toàn bộ lịch sử suy luận. Giữ câu trả lời cuối và quan sát hữu ích rõ ràng để lượt tiếp theo sửa đúng phần mà không nhầm ý nghĩ trung gian trước đó với phát hiện được chấp nhận.
Mô hình có thể suy luận nên gọi hàm nào trong số được cung cấp và trả nội dung lời gọi công cụ có cấu trúc. Định nghĩa công cụ bằng tên có ý nghĩa, mô tả và lược đồ tham số. Ứng dụng thực hiện thao tác được chọn và trả quan sát; tác vụ tiếp diễn cần dùng kết quả thực tế đó. Với tác tử lập trình, chỉ rõ tệp được phép và hành vi xác định hoàn thành thay đổi, rồi yêu cầu triển khai cùng quan sát xác thực hỗ trợ.
Thẻ liệt kê mười hai ngôn ngữ đã kiểm thử. Đặt ngôn ngữ trả lời và giữ tên riêng hoặc mã định danh trong mã. Huấn luyện chủ yếu bằng tiếng Anh cùng dữ liệu đa ngôn ngữ nên hiệu năng ngôn ngữ khác có thể thay đổi; vài ví dụ liên quan có thể làm rõ tác vụ và phong cách đầu ra dự định.
IBM lưu ý mô hình vẫn có thể tạo câu trả lời sai hoặc thiên lệch, và nội dung tư duy có thể gồm ý tưởng trung gian chưa trau chuốt. Đối chiếu phản hồi cuối với nguồn cung cấp, kiểm tra trích xuất số và xem mã trong ứng dụng dự định. Kết quả hữu ích là câu trả lời, sản phẩm mã hoặc bản ghi phân tích có bằng chứng và thông tin chưa giải quyết được nêu rõ, đồng thời giữ đúng phiên bản 4.2 8B cùng khác biệt chế độ.
POST /v1/messagestextjson, sse| Trường | Loại | Yêu cầu | Giá trị & giới hạn | Mặc định |
|---|---|---|---|---|
Trườngmodel | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn ibm-granite/granite-4.2-8b | Mặc định— |
Trườngmessages | Loạimessage[] | Yêu cầuBắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngmessages[].role | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn user, assistant | Mặc định— |
Trườngmessages[].content | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngmax_tokens | Loạiinteger | Yêu cầuBắt buộc | Giá trị & giới hạn | Mặc định— |
Trườngstream | Loạiboolean | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc địnhfalse |
Văn bản · Văn bản UTF-8
Chuỗi messages[].content
| Tham số | Hợp đồng |
|---|---|
Tham sốcontent_type | Hợp đồngapplication/json |
Tham sốrequired | Hợp đồngmodel, messages, max_tokens |
Tham sốoptional_controls | Hợp đồngstream |
Tham sốmaterial_types | Hợp đồngtext |
Tham sốtext_file_material | Hợp đồngĐọc tài liệu UTF-8 thực tế và đặt nội dung văn bản vào chuỗi đầu vào hoặc nội dung thông điệp được chỉ định. |
Vòng đời: synchronous_or_streamed
Thông tin biểu giá không bổ sung tùy chọn yêu cầu. Các tham số được hỗ trợ nằm trong phương thức đã chọn.
Đối chiếu từng khoản phí với điều kiện hiển thị. Dùng một mức phí cho mỗi nhóm cấu hình thay thế.
| Cấu hình | Biểu mức phí | Token ngữ cảnh, lớn hơn | Token ngữ cảnh, tối đa và bao gồm | Phí |
|---|---|---|---|---|
| Cấu hìnhGiá cơ sở cho token | Biểu mức phíMức phí cơ bản | Token ngữ cảnh, lớn hơn— | Token ngữ cảnh, tối đa và bao gồmKhông có giới hạn trên | Phí Đầu vào · Token đầu vào $0.0002 / 1K token Đầu ra · Token đầu ra $0.0003 / 1K token Đầu vào · Đọc bộ nhớ đệm $0.0001 / 1K token Đầu vào · Ghi bộ nhớ đệm — / 1K token Đầu vào · Ghi bộ nhớ đệm, 1 giờ — / 1K token |
| Cấu hìnhBậc 1 theo độ dài yêu cầu | Biểu mức phí— | Token ngữ cảnh, lớn hơn0 | Token ngữ cảnh, tối đa và bao gồmKhông có giới hạn trên | Phí Đầu vào · Token đầu vào $0.0002 / 1K token Đầu ra · Token đầu ra $0.0003 / 1K token Đầu vào · Đọc bộ nhớ đệm $0.0001 / 1K token Đầu vào · Ghi bộ nhớ đệm — / 1K token Đầu vào · Ghi bộ nhớ đệm, 1 giờ — / 1K token |
Ailoot tạm giữ một khoản ước tính trước yêu cầu. Sau khi có kết quả, phí cuối cùng được quyết toán theo mức sử dụng đo được. Việc quyết toán khi truyền luồng dùng bản ghi mức sử dụng cuối cùng. Cách hoạt động của cơ chế tạm giữ và quyết toán →
{\n "model": "ibm-granite/granite-4.2-8b",\n "max_tokens": 128,\n "messages": [\n {\n "role": "user",\n "content": "Summarize the incident report."\n }\n ],\n "stream": false\n}set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\n: "${AILOOT_TEXT_FILE:?Set your actual UTF-8 document}"\nexport AILOOT_TEXT_FILE\npython3 - <<'PY_REQUEST'\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'ibm-granite/granite-4.2-8b', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nPath('request.json').write_text(json.dumps(payload, ensure_ascii=False), encoding='utf-8')\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/messages \\\n -H "x-api-key: $AILOOT_API_KEY" -H 'anthropic-version: 2023-06-01' -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nPY_RESULT\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'ibm-granite/granite-4.2-8b', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nfrom urllib.request import Request, urlopen\nfrom urllib.error import HTTPError\n\napi_key = os.environ['AILOOT_API_KEY']\nif not api_key.strip():\n raise SystemExit('Set AILOOT_API_KEY before making a request')\nheaders = {'x-api-key': 'PLACEHOLDER_KEY', 'anthropic-version': '2023-06-01', 'Content-Type': 'application/json'}\nheaders['x-api-key'] = api_key\nrequest = Request('https://api.ailoot.ai/v1/messages', data=json.dumps(payload, ensure_ascii=False).encode('utf-8'), headers=headers, method='POST')\ntry:\n with urlopen(request, timeout=120) as response:\n raw = response.read()\n Path('response-headers.txt').write_text(str(response.headers), encoding='utf-8')\nexcept HTTPError as error:\n Path('result.json').write_bytes(error.read())\n Path('response-headers.txt').write_text(str(error.headers), encoding='utf-8')\n raise\nPath('result.json').write_bytes(raw)\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nJSON hoặc SSE
Lưu mọi phản hồi hoàn chỉnh, tệp và phần nội dung được trả về.
Giữ mọi khối nội dung, chữ ký suy nghĩ và ID sử dụng công cụ thực tế. Ghép tất cả các phần thay đổi của khối SSE; khối văn bản đầu tiên không phải toàn bộ đầu ra.
Giữ ID và header của yêu cầu, phản hồi. Không cung cấp URL chung để truy xuất tác vụ văn bản.
| Trường | Loại |
|---|---|
Trườngid | Loạistring |
Trườngmodel | Loạistring |
Trườngcontent[] | Loạitext|thinking|tool_use|other content block |
Trườngstop_reason | Loạistring|null |
Trườngusage | Loạiobject |
| Phản hồi | Điều kiện | Bước tiếp theo |
|---|---|---|
Phản hồi400 · invalid_request_error | Điều kiệnTrường bắt buộc, cách biểu diễn tài liệu hoặc giá trị tham số không hợp lệ | Bước tiếp theoSửa các trường được chỉ ra trước khi gửi yêu cầu tạo mới. |
Ailoot Ultra ibm-granite/granite-4.2-8b
Dùng các đường dẫn phương thức hiển thị ở trên.
Ví dụ kỹ thuật bằng tiếng Anh
Fix a mutable default argument\n\nExplain why this Python function shares results across calls and propose a correction: def collect(value, items=[]): items.append(value); return items. The caller may supply an existing list and expects it to be updated. Include tests for two omitted-list calls and one explicitly supplied list. Preserve the function name and calling convention.A corrected collect function, a brief cause explanation and tests distinguishing default-list isolation from explicit-list mutation.Check that omitted-list calls return independent lists while an explicitly supplied list is still updated.