Chúng tôi đã tiến hành một thử nghiệm, yêu cầu Kimi K2.7 Code và Claude Fable 5 mỗi bên tạo 12 trang đích để so sánh song song. Nhìn chung, chi phí của Kimi K2.7 Code thấp hơn khoảng 94% (rẻ hơn 16 lần) so với Fable 5, và chất lượng đầu ra tương đương, đặc biệt sau khi chúng tôi cung cấp cho Kimi ngữ cảnh phù hợp thông qua một MCP thiết kế.
Chúng tôi đã công bố kết quả trên trang web OVSC, cùng với tất cả các biến thể do Claude Opus 4.8, Claude Fable 5 và Kimi K2.7 Code tạo ra. Trung bình, Kimi rẻ hơn khoảng 16 lần so với Fable và rẻ hơn khoảng 8 lần so với Opus.
Ảnh chụp màn hình từ https://ovsc.vercel.app/
Trang web OVSC cho phép bạn khám phá tất cả các trang đích cùng với bảng phân tích chi phí, lượng token sử dụng và thời gian tạo.
Để hiểu cách chúng tôi tiến hành thử nghiệm, trước tiên chúng tôi thiết lập một đường cơ sở và xem mô hình có thể tạo ra gì chỉ từ prompt.
Các Prompt
Chúng tôi bắt đầu với một bộ nhỏ các prompt trang đích thuộc nhiều danh mục khác nhau, bao gồm B2B SaaS, một quầy bar speakeasy trên sân thượng và một công cụ dành cho nhà phát triển để truy vấn SQL. Dưới đây là một số mẫu prompt chúng tôi đã sử dụng:
- Xây dựng trang đích cho một công cụ dành cho nhà phát triển có thể chuyển đổi truy vấn SQL thành biểu đồ.
- Xây dựng trang đích cho một quầy bar cocktail speakeasy trên sân thượng - phong cách art deco, lá vàng và ngọc lục bảo, vẻ quyến rũ thập niên 1920.
- Xây dựng trang đích cho một startup B2B SaaS - công cụ quản lý dự án và cộng tác nhóm (nhiệm vụ, dòng thời gian, quy trình làm việc nhóm, tích hợp).
Chúng tôi đưa cùng một prompt cho cả Kimi K2.7 Code và Claude Fable 5.
Dưới đây là các trang mà những mô hình này đã tạo ra khi được yêu cầu “Xây dựng trang đích cho một công cụ dành cho nhà phát triển có thể chuyển đổi truy vấn SQL thành biểu đồ.”
Không may, cả hai mô hình đều tạo ra các trang đích có cảm giác rõ ràng là do AI tạo ra.
Máy chủ MCP Cảm hứng Thiết kế
Chúng tôi thiết lập một máy chủ MCP tùy chỉnh cung cấp ảnh chụp màn hình của các trang đích được thiết kế tốt, cùng với các yếu tố UI riêng lẻ và các tài liệu tham khảo trực quan khác. Vì Kimi K2.7 Code có khả năng đa phương thức, chúng tôi có thể đưa những hình ảnh đó trực tiếp vào prompt cùng với văn bản.
Điều này đã thay đổi đáng kể kết quả. Thay vì chỉ tạo bố cục từ một prompt ngắn, Kimi có thể làm việc dựa trên các ví dụ cụ thể, nắm bắt ngôn ngữ trực quan và áp dụng các mẫu đó vào một trang mới. Trên thực tế, kết quả có cấu trúc phân cấp rõ ràng hơn, kiểu chữ đẹp hơn và bố cục có chủ đích hơn.
Đây là phiên bản trước và sau của trang đích Rooftop Speakeasy:
Với cảm hứng thiết kế, Kimi đã tạo ra các trang tải nhanh hơn, tránh được các placeholder hình ảnh bị hỏng và sử dụng kiểu chữ dễ đọc hơn nhiều.
Sau khi thiết kế được cải thiện, điều tiếp theo chúng tôi muốn khám phá là chi phí.
Chi phí cho mỗi Trang Đích
Một trong những lợi thế của việc sử dụng mô hình mã nguồn mở như Kimi K2.7 Code là chi phí. Ví dụ, trang đích này cho một SaaS B2B chỉ tốn 4 xu với Kimi. Cùng một prompt đó với Claude Fable tốn 1,09 đô la, đắt hơn gần 27 lần.
Trung bình, các trang đích chúng tôi tạo bằng Kimi K2.7 Code rẻ hơn khoảng 16 lần so với các trang được tạo bằng mô hình độc quyền như Claude Fable 5.
Với các tác nhân mã hóa sinh học, bạn hiếm khi chỉ tạo một phiên bản trang đích. Thông thường, bạn tạo nhiều biến thể để khám phá các hướng thiết kế, nội dung và yếu tố trang khác nhau. Sau đó, bạn lặp lại trên những phiên bản có triển vọng, chỉnh sửa và tinh chỉnh qua nhiều chu kỳ thử nghiệm và điều chỉnh. Với tất cả sự qua lại này, sự khác biệt về chi phí nhanh chóng tăng lên, ngay cả đối với một thứ đơn giản như trang đích SaaS.
Nếu bạn tạo 100 trang bằng Kimi K2.7 Code, bạn sẽ tiết kiệm được khoảng 94 đô la so với việc sử dụng mô hình độc quyền như Claude Fable 5.
Chi phí thấp hơn là một lợi thế rõ ràng, nhưng chúng tôi cũng muốn có cách so sánh chất lượng kết quả.
So sánh Kết quả
Sau khi tạo các trang đích, chúng tôi muốn có một cách có hệ thống để so sánh Kimi và Fable. Chúng tôi không chỉ xem xét mã nguồn mà còn xem xét chất lượng tổng thể của từng trang, bao gồm định vị, hướng trực quan, cấu trúc nội dung, sự tinh tế, khả năng đáp ứng và thực thi kỹ thuật. Để làm điều đó, chúng tôi đưa cho GPT-5.5 một tiêu chí để đánh giá và chấm điểm các ảnh chụp màn hình cũng như mã nguồn từ mỗi trang, và đưa ra điểm số cuối cùng từ 0 đến 100.
Dưới đây là điểm số cho mỗi trang đích:
Claude Fable đạt điểm cao hơn trong cả hai ví dụ, nhưng khoảng cách tương đối nhỏ. Kimi vẫn duy trì tính cạnh tranh về thiết kế, cấu trúc và chất lượng trang tổng thể, trong khi chi phí vận hành thấp hơn nhiều. Đối với loại quy trình làm việc này, chúng tôi cảm thấy sự đánh đổi đó là hợp lý.
Claude Fable đạt điểm cao hơn trong cả hai ví dụ, nhưng khoảng cách tương đối nhỏ. Kimi vẫn duy trì tính cạnh tranh về thiết kế, cấu trúc và chất lượng trang tổng thể, trong khi chi phí vận hành thấp hơn nhiều. Đối với loại quy trình làm việc này, chúng tôi cảm thấy sự đánh đổi đó là hợp lý.
Suy nghĩ Cuối cùng
Các mô hình mã nguồn mở như Kimi K2.7 Code đã có khả năng tạo ra các trang đích hữu ích, nhưng thử nghiệm của chúng tôi cho thấy chỉ riêng prompt thôi chưa đủ. Nếu thiếu ngữ cảnh tốt hơn, cả Kimi và Claude Fable đều có xu hướng tạo ra các kết quả trau chuốt nhưng chung chung.
Sự cải thiện lớn nhất đến từ việc cung cấp cho Kimi cảm hứng trực quan thông qua một máy chủ MCP tùy chỉnh. Khi nó có thể làm việc dựa trên ảnh chụp màn hình và các tài liệu tham khảo thiết kế, các trang trở nên dễ đọc hơn, có cấu trúc hơn và có chủ đích trực quan hơn.
Kết hợp với chi phí thấp hơn, điều đó khiến các mô hình mã nguồn mở trở thành lựa chọn thực tế cho loại quy trình làm việc này. Nếu bạn có thể cung cấp đầu vào mạnh mẽ hơn cho mô hình và lặp lại với chi phí rẻ, bạn có thể đạt được những kết quả đáng ngạc nhiên.
Bạn có thể dùng thử các mô hình mã nguồn mở như Kimi K2.7 Code trên together.ai.
