Trao đổi về dự án

Trí tuệ nhân tạo ứng dụngBlog của Phòng Thí Nghiệm

Blog của Lab AI: thử nghiệm và kiến trúc

Hướng dẫn, thử nghiệm và phân tích của PartITech về LLM, RAG, tìm kiếm vector và tích hợp trí tuệ nhân tạo.

Dự án của Lab Thử nghiệm Kinh nghiệm thực tế

Bài viết của Lab

Kinh nghiệm, hướng dẫn và phân tích kỹ thuật

Các bài viết ghi lại thí nghiệm và lựa chọn kiến trúc xoay quanh LLM, RAG, tìm kiếm vector và tích hợp AI vào ứng dụng web. Mỗi bài nêu rõ bối cảnh và giới hạn để vẫn hữu ích ngoài phạm vi một demo.

Blog PartITech

Blog công nghệ

Phân tích kỹ thuật, hướng dẫn thực tế và kinh nghiệm triển khai để xây dựng, hiện đại hóa và duy trì ứng dụng bền vững.

11 bài viết

LoRA hay tinh chỉnh toàn bộ: chiến lược nào để chọn cho các mô hình IA của bạn?

LoRA hay Full Fine-Tuning: Chiến Lược Fine-Tuning Nào Nên Chọn cho Mô Hình AI của Bạn? Trong một thế giới ngày càng bị chi phối bởi trí tuệ nhân tạo (AI), việc điều chỉnh các mô hình ngôn ngữ theo các nhu cầu công việc cụ thể đã trở thành một vấn đề chiến lược đối với nhiều doanh nghiệp. Các mô hình kiểu Transformer, như LLaMA, Mistral, Phi, Qwen hay GPT, là những công cụ mạnh mẽ có khả năng hiểu và tạo ra văn bản, nhưng chúng thường cần được tùy chỉnh để đáp ứng các yêu cầu đặc thù. Fine-tun...

Hệ thống RAG với txtai — phần 1: tạo tăng cường bằng tìm kiếm

Khám phá thế giới của "Retrieval-Augmented Generation" (RAG) - sự kết hợp đột phá giữa việc truy xuất thông tin và sinh sản ngôn ngữ trong xử lý ngôn ngữ tự nhiên. Tìm hiểu các thành phần chủ chốt, thách thức và cơ hội của công nghệ này, và theo dõi hướng dẫn thực hành để triển khai hệ thống RAG sử dụng TxtAi và Llama.cpp.

llama.cpp : chạy một LLM cục bộ

Llama CPP là một công cụ mới được thiết kế để thực hiện các mô hình ngôn ngữ trực tiếp trên C/C++. Công cụ này được tối ưu hóa đặc biệt cho các bộ xử lý Apple Silicon thông qua việc sử dụng công nghệ ARM NEON và bộ khung Accelerate. Nó cũng cung cấp khả năng tương thích AVX2 cho các hệ thống dựa trên kiến trúc x86. Chạy chủ yếu trên CPU, Llama CPP còn tích hợp khả năng lượng tử hóa 4 bit, từ đó cải thiện thêm hiệu quả.

Sản phẩm tiếp theo

Tạo nền móng vững chắc cho tham vọng của bạn.

Hãy chia sẻ bối cảnh, ràng buộc và kết quả mong đợi. Chúng tôi sẽ phản hồi bằng đánh giá kỹ thuật ban đầu cụ thể.

Trao đổi với chuyên gia