Hành trình âm thầm nhưng đầy kiêu hãnh của những người vận hành FPT AI Factory

Khi FPT chính thức ra mắt AI Factory – nhà máy AI đầu tiên tại Việt Nam – nhiều người đã không giấu được sự tự hào. Họ nhìn thấy một bước tiến ngoạn mục về công nghệ, một tuyên ngôn mạnh mẽ về khát vọng chinh phục trí tuệ nhân tạo. Nhưng ẩn sau ánh đèn sân khấu, sau những lần giới thiệu hào nhoáng là một hành trình dài đầy thử thách và không ít lần nghẹn thở của đội ngũ kỹ sư vận hành – những người thầm lặng giữ cho cỗ máy công nghệ khổng lồ ấy hoạt động bền vững từng giây, từng phút.

Trung tâm vận hành Cloud là đầu mối kết nối, nơi tập trung mọi chỉ số kỹ thuật, yêu cầu hỗ trợ và cả những tình huống khẩn cấp để kịp thời phân tích và phản ứng. Ở đây, sự bình yên hiếm khi xuất hiện, bởi mỗi thành viên luôn căng mình theo dõi, phân tích và phản ứng kịp thời để hệ thống vận hành trơn tru. Chúng tôi là những “người gác nhịp đập”, giữ cho hệ thống không bao giờ ngưng nghỉ.

Nhớ lại những ngày đầu tiếp nhận hệ thống, khái niệm “ngày nghỉ” với chúng tôi gần như không tồn tại. Đó là giai đoạn căng thẳng tột độ nhưng cũng đầy quyết tâm. Các đối tác như NVIDIA, ASUS, HPE, VAST cùng chúng tôi rà soát và cấu hình từng chi tiết nhỏ nhất. Từ việc quản trị GPU, phân bổ và tối ưu lưu trữ, giám sát hạ tầng mạng – mọi công đoạn đều yêu cầu độ chính xác tuyệt đối. Chỉ một sai số nhỏ cũng có thể kéo theo hậu quả dây chuyền khôn lường.

Bên cạnh triển khai kỹ thuật, việc đào tạo để làm chủ và vận hành cả hệ thống là một thử thách lớn. Cả đội phải trải qua hơn 400 giờ đào tạo chuyên sâu, chia thành nhiều phiên liên tục, trực tiếp với chuyên gia nước ngoài. Không chỉ học cách “sử dụng” hệ thống, chúng tôi phải hiểu sâu bản chất từng công nghệ, nắm chắc luồng xử lý và biết cách phản ứng linh hoạt khi có sự cố phát sinh. Đó là những ngày mệt nhoài nhưng không ai than phiền bởi tất cả đều hiểu: mình đang góp phần vận hành một hạ tầng mang tính nền tảng cho tương lai. Một hệ thống mà mỗi thành phần không chỉ là thiết bị, mà là kỳ vọng, là niềm tin và là sứ mệnh.

Rồi đến những ngày diễn tập sự cố. Một việc tưởng như ‘ngược đời’, nhưng lại là phương thức cần thiết để rèn giũa khả năng phản ứng. Hàng nghìn kịch bản được giả lập, hệ thống bị đẩy vào những kịch bản khấc nghiệt nhất. Trong áp lực dồn dập ấy, chúng tôi phải học cách giữ đầu óc tỉnh táo, mỗi quyết định đưa ra đều phải chính xác đến từng giây. Chỉ khi đối diện với rủi ro giả lập, chúng tôi mới đủ vững vàng khi sự cố thực sự xảy đến; cũng như kiểm soát các vấn đề trong vận hành. ‘Mình phải chủ động làm quen với rủi ro, để nếu nó đến thật, mình bình tĩnh xử lý,’ – anh Trương Văn Mạnh chia sẻ trong khi kiểm tra kịch bản failover.”

Có đêm, đúng 2 giờ sáng, hệ thống có cảnh báo bất thường và điện thoại vang lên. Chúng tôi cùng bật dậy như lập trình sẵn, tất cả đồng đội đã có mặt, mắt còn đỏ nhưng tay không ngừng thao tác. “Không ai phải nhắc ai, tất cả đều tự giác, sẵn lòng giúp đỡ nhau”, anh Phan Hồng Tâm – Giám đốc Khối Công nghệ Cloud chia sẻ. Bởi chúng tôi đều hiểu rất rõ: ở vị trí “tiền tuyến”, chỉ có sự chủ động, chỉ có tinh thần không ngủ quên trên thành công, mới giữ cho AI Factory luôn vững vàng – không chỉ trước sự cố kỹ thuật, cũng như trước sự tin tưởng của quốc gia. Đó là những khoảnh khắc không ai thấy, không lên hình, không có tràng vỗ tay nhưng với chúng tôi, đó là những giây phút quan trọng nhất.

Một trong những đỉnh điểm của căng thẳng là đợt trực toàn hệ thống trong ba ngày liên tiếp khi bão Wipha đổ bộ miền Bắc. Ngay khi nhận thông tin về diễn biến phức tạp của cơn bão, chúng tôi đã ngay lập tức lên kế hoạch “trực chiến” trong AI Factory suốt ba ngày liền. Không ai về nhà. Không ai rời vị trí. “Tất cả nhằm mục tiêu duy nhất: đảm bảo toàn bộ hệ thống tiếp tục vận hành ổn định, không gián đoạn dù chỉ một phút – kể cả trong tâm bão”, anh Đoàn Trọng Dũng – Phó Giám đốc Trung tâm Vận hành Cloud chia sẻ.

Nhưng vận hành không chỉ là làm việc với màn hình, con số hay máy móc lạnh lùng. Có những lúc, công việc của chúng tôi lại giống như tổ chức sự kiện – mà khách mời đều là những đoàn cấp cao, những người mang trọng trách chiến lược quốc gia. Những lần chuẩn bị đón tiếp các đoàn từ Bộ Ngoại giao, Bộ Công an, hay các đối tác quốc tế cũng là những khoảnh khắc đáng tự hào.

Không chỉ đơn thuần là đảm bảo hệ thống “chạy ổn định”. Trước mỗi buổi đón tiếp, cả đội lại bước vào một cuộc “tổng duyệt” thầm lặng nhưng đầy áp lực. “Chúng tôi rà soát từng mét sàn kỹ thuật, kiểm tra từng đoạn cáp, từng con ốc, từng đèn báo trên các cụm thiết bị. Mọi quy trình vận hành từ khi mở khóa cửa trung tâm đến quy trình xử lý tình huống giả định đều phải được chuẩn hóa và vận hành mượt mà như một bản nhạc không nốt lỗi” – anh Nguyễn Hoàng Bách – thành viên đội hạ tầng chia sẻ.

“Có những buổi tối sau giờ làm việc, cả nhóm vẫn còn nán lại để cùng kiểm tra thiết bị, máy móc” – Lê Anh Tuyến kỹ sư sinh năm 2001 chia sẻ. Không ai yêu cầu, nhưng ai cũng hiểu: đây không chỉ là tiếp khách, mà là cơ hội để khẳng định năng lực. Làm sao để khi bước vào nhà máy, người ta thấy được sự chuyên nghiệp, sự chỉn chu – và trên hết, thấy được một hệ thống hạ tầng xứng tầm quốc gia đang được vận hành bởi những con người tận tâm và tự hào. Đó là những khoảnh khắc mà dù mệt rã rời, ai cũng giữ một niềm tin âm thầm: công việc của mình, dù không hào nhoáng, nhưng đang góp phần làm nên điều lớn lao.

Không ít lần chúng tôi kiểm tra hệ thống xong lúc 2 giờ sáng, chỉ kịp chợp mắt một chút rồi lại bắt đầu ca trực. Nhưng chẳng ai than vãn. Vì chúng tôi biết rằng, mỗi lần tiếp đoàn là một cơ hội để không chỉ giới thiệu công nghệ FPT đang sở hữu – mà là cơ hội để chứng minh bản lĩnh vận hành của người Việt, là khoảnh khắc để những kỹ sư thầm lặng như chúng tôi được thể hiện tầm vóc, không phải bằng lời nói, mà bằng quy trình nghiêm túc, sự chỉn chu đến từng chi tiết.

Đoàn rời đi trong sự hài lòng, ghi nhận tinh thần sẵn sàng và tính chuyên nghiệp của đội ngũ. Chúng tôi không cần nhiều lời, chỉ một cái gật đầu, một cái bắt tay. Nhưng sâu trong lòng là niềm tự hào lặng lẽ, khi biết rằng mình vừa vượt qua bài kiểm tra khắc nghiệt nhất: bài kiểm tra của niềm tin và sự tận tâm.

Nhìn lại, AI Factory không đơn thuần là một biểu tượng công nghệ. Nó là thành quả của sự bền bỉ, kỷ luật và cả tình yêu nghề của đội ngũ kỹ sư, vận hành, lắp đặt,…. Chính họ – những người không ngại thức trắng đêm đã khiến hệ thống này không chỉ là một nhà máy AI, mà là một giấc mơ công nghệ của Việt Nam dần thành hình.

Và có lẽ, điều đáng tự hào nhất không phải là những con số ấn tượng hay thiết bị hiện đại – mà là một đội ngũ dám nghĩ, dám làm, dám hy sinh thầm lặng để tạo ra nền tảng AI mạnh mẽ nhất khu vực. Đó cũng là tuyên ngôn thầm lặng nhưng đầy kiêu hãnh của đội ngũ vận hành AI Factory: chúng tôi không chỉ là những người xây dựng công nghệ – mà là những người đang góp phần kiến tạo tương lai.

Trịnh Minh Đức

Trung tâm Vận hành Cloud – Khối Công nghệ Cloud