Tôi là một trong 16 nhà phát triển trong nghiên cứu này. Tôi muốn nói về ý kiến của mình về nguyên nhân và chiến lược giảm thiểu cho sự chậm lại của nhà phát triển. Tôi sẽ nói như một câu "tại sao phải nghe bạn?" rằng tôi đã trải qua -38% tốc độ AI đối với các vấn đề được giao của mình. Tôi nghĩ sự minh bạch giúp ích cho cộng đồng.

Thứ nhất, tôi nghĩ rằng tăng tốc AI có mối tương quan rất yếu với khả năng của bất kỳ ai với tư cách là một nhà phát triển. Tất cả các nhà phát triển trong nghiên cứu này đều rất giỏi. Tôi nghĩ nó liên quan nhiều hơn đến việc rơi vào các chế độ thất bại, cả về khả năng của LLM và quy trình làm việc của con người. Tôi làm việc với rất nhiều nhà phát triển đào tạo trước tuyệt vời và tôi nghĩ mọi người phải đối mặt với nhiều vấn đề tương tự. Chúng tôi muốn nói rằng LLM là công cụ, nhưng hãy coi chúng giống như một viên đạn thần kỳ. Theo nghĩa đen, bất kỳ nhà phát triển nào cũng có thể chứng thực sự hài lòng từ việc cuối cùng gỡ lỗi một vấn đề gai góc. LLM là một nút tắt dopamine lớn có thể ảnh hưởng đến vấn đề của bạn. Bạn có tiếp tục nhấn nút có 1% cơ hội sửa chữa mọi thứ không? Nó thú vị hơn rất nhiều so với sự thay thế mệt mỏi, ít nhất là đối với tôi.

Tôi nghĩ rằng các trường hợp sử dụng LLM quá mức có thể xảy ra vì nó dễ dàng tối ưu hóa cho sự thích thú hơn là thời gian giải quyết trong khi làm việc. Tôi nhấn tab trong con trỏ trong 5 giờ thay vì gỡ lỗi trong 1:

Thứ ba, rất dễ bị phân tâm trong thời gian ngừng hoạt động trong khi LLM đang tạo ra. Nền kinh tế chú ý trên mạng xã hội rất tàn bạo và tôi nghĩ mọi người dành 30 phút để cuộn trong khi "chờ đợi" thế hệ 30 giây của họ. Tất cả những gì tôi có thể nói về điều này là chúng ta nên biết những cạm bẫy của chính mình và cố gắng lấp đầy thời gian tạo LLM này một cách hiệu quả: - Nếu nhiệm vụ đòi hỏi sự tập trung cao, hãy dành thời gian này để làm một nhiệm vụ phụ hoặc suy nghĩ về các câu hỏi tiếp theo. Ngay cả khi người mẫu trả lời câu hỏi của bạn, tôi còn không hiểu điều gì nữa? - Nếu nhiệm vụ yêu cầu tập trung thấp, hãy thực hiện một nhiệm vụ nhỏ khác trong thời gian chờ đợi (trả lời email/slack, đọc hoặc chỉnh sửa đoạn văn khác, v.v.). Như mọi khi, các bước vệ sinh kỹ thuật số nhỏ giúp giải quyết vấn đề này (trình chặn trang web, điện thoại trên dnd, v.v.). Xin lỗi vì là một grampy, nhưng nó phù hợp với tôi :)

Một số tuyên bố cuối cùng: - METR là một tổ chức tuyệt vời để làm việc cùng và họ là những nhà khoa học giỏi. Tôi thích cả việc tham gia vào nghiên cứu này và đọc kết quả của họ. - Tôi không phải là một chuyên gia LLM nào đó đang cố gắng rao giảng. Hãy nghĩ về điều này như tôi xuất bản một mục nhật ký cá nhân và hy vọng rằng những người khác có thể hưởng lợi từ sự nội tâm của tôi.