Sửa chữa hoặc tái xây dựng: Năm dấu hiệu cho thấy hệ thống AI đã hết hạn sử dụng

Hệ thống AI gần như không bao giờ chết theo cách buộc phải đưa ra quyết định

Nó tiếp tục trả lời, tiếp tục đánh giá, và mỗi sáng đều tạo ra một tệp. Trong khi đó, đội ngũ tìm cách vượt qua nó, các yêu cầu thay đổi tích tụ, và chi phí hàng năm tăng lên mà không ai chọn tăng nó. Sự kết thúc của vòng đời đến như một sự gia tăng chậm về chi phí duy trì thứ này, chính xác là loại chi phí chưa bao giờ xuất hiện trong chương trình nghị sự.

Do đó, quyết định bị trì hoãn. Việc tái xây dựng nghe có vẻ đắt đỏ và gây gián đoạn; tiếp tục hoạt động nghe miễn phí. Nhưng nó không thực sự miễn phí, và nhiệm vụ của một nhà lãnh đạo ở đây là nhận ra khoảnh khắc khi chi phí duy trì vượt quá việc thay thế.

Năm tín hiệu

Đây là những tín hiệu được duy trì xuyên suốt các ngành công nghiệp và loại hệ thống khác nhau. Bất kỳ dấu hiệu nào trong số này cũng là một lời nhắc nhở. Ba dấu hiệu cùng xuất hiện có nghĩa quyết định đã được đưa ra cho bạn.

Những thay đổi nhỏ không còn nhỏ. Một quy tắc định giá mất hai ngày để điều chỉnh trong năm đầu tiên giờ mất ba tuần và ảnh hưởng đến bốn thứ khác. Hệ thống đã tích lũy đủ nhiều trường hợp đặc biệt mà không ai có thể dự đoán phạm vi của một thay đổi.
Các giải pháp tạm thời trở thành quy trình. Mọi người xuất ra kết quả và sửa chữa nó trong một bảng tính trước khi ai đó sử dụng nó. Bảng tính này giờ có chủ sở hữu, quy ước đặt tên, và sao lưu. Hệ thống thực sự là giải pháp tạm thời; hệ thống chính thức là nguồn dữ liệu.
Bạn không thể trả lời những câu hỏi cơ bản về nó. Tại sao đơn hàng bị từ chối vào tháng Ba? Phiên bản nào đang chạy khi các con số thay đổi? Nếu không ai có thể trả lời mà không mất một tuần khai quật, bạn đang gánh chịu rủi ro tuân thủ và uy tín mà chưa tính đến chi phí.
Tri thức chỉ tồn tại trong một hoặc hai người. Mỗi thay đổi đều phụ thuộc vào cùng một người. Họ không tích trữ điều gì; họ đơn giản là bản sao duy nhất của các quyết định thiết kế. Đó là một rủi ro nhân sự ngụy trang dưới hình dạng kỹ thuật.
Yếu tố hạn chế đã thay đổi. Hệ thống được xây dựng xung quanh một giới hạn không còn tồn tại - cửa sổ ngữ cảnh, giới hạn độ trễ, giá mỗi cuộc gọi, hoặc một khả năng cần ba thành phần và giờ chỉ cần một. Hầu hết những gì bạn duy trì là khung cho một vấn đề đã biến mất.

Điều gì không phải là tín hiệu

Một quý đầu tư chất lượng đầu ra kém thường là vấn đề dữ liệu, không phải thiết kế. Việc phát hành mô hình mới không phải là lý do để tái xây dựng bất cứ thứ gì; nếu hệ thống của bạn được cấu trúc tốt, việc thay đổi mô hình chỉ là một thay đổi cấu hình và bạn nên kiểm tra xem nó có hiệu quả hay không. Một sự cố ồn ào cũng không phải là bằng chứng - các sự cố tập trung xung quanh các hệ thống dễ thấy, chứ không phải những hệ thống mong manh.

Sự phân biệt quan trọng là giữa một hệ thống đang hoạt động kém và một hệ thống trở nên đắt đỏ để thay đổi. Điều đầu tiên có thể sửa chữa được. Điều thứ hai là một bản án cấu trúc, và không có lượng vá nào có thể đảo ngược nó.

Đánh giá chi phí duy trì, không chỉ tái xây dựng

Các đề xuất tái xây dựng thường thất bại vì chỉ có một bên trong bảng tính đưa ra con số. Đặt một con số cho bên còn lại trước khi đưa ra quyết định.

Tính tổng những gì hệ thống hiện tại đã tiêu thụ trong 12 tháng qua: giờ làm việc của kỹ sư dành cho bảo trì và sự cố, hóa đơn nhà cung cấp và máy chủ, giờ người dùng dành cho sửa chữa thủ công sau đó, và giá trị của các thay đổi mà doanh nghiệp yêu cầu nhưng không nhận được. Phần cuối cùng này thường là lớn nhất và gần như chưa bao giờ được tính đến. Sau đó so sánh với 12 tháng trước đó. Nếu đường biểu đồ tăng trong khi đầu ra ổn định, bạn đã có câu trả lời, và bạn có nó trong loại tiền tệ duy nhất mà ban giám đốc tranh luận.

Tái xây dựng từng phần, giữ lại dữ liệu

Việc tái xây dựng không có nghĩa là một chương trình hai năm với ngày chuyển đổi. Các hệ thống thay thế tốt được thay thế một khả năng tại một thời điểm: dựng lên con đường mới cho một miếng giao thông hẹp, chạy nó bên cạnh hệ thống cũ, so sánh đầu ra trên các trường hợp thực tế, di chuyển miếng giao thông sang, lặp lại. Hệ thống cũ vẫn hoạt động cho đến khi miếng giao thông cuối cùng rời đi. Không có thời điểm nào doanh nghiệp phụ thuộc vào một cuộc chuyển đổi cuối tuần duy nhất.

Điều duy nhất đáng để giữ lại là dữ liệu - các ví dụ được dán nhãn, các sửa chữa, hồ sơ về những gì hệ thống đã sai và cách mọi người sửa nó. Sự phán đoán tích lũy này mới thực sự là tài sản có giá trị. Mã xung quanh nó có thể thay thế được, và cuối cùng nên được thay thế.

Hầu hết các tổ chức chờ khoảng một năm quá lâu. Chi phí của thời gian đó hiếm khi hiển thị, chính xác là lý do tại sao nó cần được đo lường. Chúng tôi đã xây dựng thực hành của mình xung quanh việc mang lại trọng lượng này cho khách hàng, nhưng việc đo lường thuộc về bạn, và điều quan trọng là phải làm điều đó trước kỳ ngân sách tiếp theo thay vì sau đó.