Nhiều lập trình viên không biết ChatGPT trả lời sai các câu hỏi lập trình

VNZ-NEWS
Vn-Z.vn Ngày 25 tháng 05 năm 2024, Generative AI đã trở thành một công cụ phát triển có thể hỗ trợ các nhà phát triển nhanh chóng tạo ra các đoạn code liên quan, cho phép các nhà phát triển chuyển dần từ "gõ mã" sang "xem lại mã". Dù trong khung soạn thảo của chatGPT đều có dòng thông báo "
ChatGPT can make mistakes. Check important info." Điều này nhắc nhở người dùng nhớ kiểm tra lại các câu trả lời cũng như các nội dung do chatGPT gợi ý vì chúng có thể sai. Trong một báo cáo mới nhất của các nhà nghiên cứu chỉ ra rằng tỷ lệ lỗi nội dung của các câu hỏi lập trình được ChatGPT trả lời lên tới 52%.

ChatGPT-vs-L3-google.webp

Một nhóm nghiên cứu từ Đại học Purdue đã trình bày tại Hội nghị tương tác giữa máy tính và con người vào đầu tháng 5 và trình bày báo cáo kiểm tra 517 câu hỏi về Stack Overflow được ChatGPT trả lời và nhận thấy tỷ lệ lỗi là 52%.

ChatGPT-in-code.png

5BLcLMR.png

pmPZwht.png

9DRiYif.png


Kết quả khảo sát cho thấy các lập trình viên con người thích câu trả lời của ChatGPT trong 35% trường hợp, cho rằng nội dung của nó toàn diện hơn và có phong cách ngôn ngữ rõ ràng. Tuy nhiên một điều tệ hơn là trong 39% trường hợp, các lập trình viên con người không phát hiện ra câu trả lời sai của ChatGPT.

Mặc dù đây chỉ là một nghiên cứu về một khía cạnh của chức năng ChatGPT, nhưng nó thực sự chỉ ra rằng các robot trí tuệ nhân tạo sinh ra vẫn dễ mắc nhiều lỗi, và con người có thể không phát hiện ra những lỗi này.

Các bạn có thể tham khảo thêm thông tin của nhóm nghiên cứu từ Đại Học Purdue
 
Trả lời

bbkim

Mỗi người một câu chuyện
Đúng rùi. Mạnh mẽ, nói chuyện linh hoạt nhưng mà gần đây nó toàn trả lời sai. Train nó cũng mệt nghỉ. Không biết tại sao nhưng dạo gần đây rất thất vọng về nó. Do câu hỏi của mình càng lúc càng khó hay dữ liệu của nó đang có vấn đề vậy biết.
 

dkt999

Gà con
Cái này công nhận dù hỏi thì cũng hỏi về một logic cụ thể chứ không nên hỏi chung chung, ngay cả con người cũng thế nếu hỏi quá chung chung thì không biết trả lời sao cho đúng.
Nhưng phải công nhận mặc tích cực là nhờ có nó code nhanh hẳn. Tăng cường khả năng trao đổi bằng tiếng Anh cũng như các tự vựng.
Với code thì nên quăng thêm input, output, logic trình bày ngắn gọn, nếu có code giả Pseudocode thì kẹp vào sẽ tăng tính chính xác. ChatGPT sẽ convert về một ngôn ngữ lập trình cụ thể sẽ ok hơn.
 

Swings Onlyone

Rìu Vàng Đôi
VIP User
không liên quan nhưng anh nhà mạng 7 ký tự buổi tối bóp băng thông khủng khiếp đến nỗi vnzoom hay voz đều load không nổi. google cũng xoay điên cuồng, VPN Premium không ăn thua.
connect vào sever game cũng bị -censor- lên -censor- xuống liên tục. lần này bóp bay cả 70% lượng users luôn hay sao ấy.
từ hôm VN bị chặn steam tới giờ thì cứ đến đêm là bóp, đúng cạn lời.
trong khi youtube 4k thì load ầm ầm như không có gì xảy ra.

muốn chuyển di thị phần cho nhau thì dùng chất lượng mà cạnh tranh, đừng bắt tay nhau ném users như ném chuột vậy
 

pthinh145

Rìu Chiến
không liên quan nhưng anh nhà mạng 7 ký tự buổi tối bóp băng thông khủng khiếp đến nỗi vnzoom hay voz đều load không nổi. google cũng xoay điên cuồng, VPN Premium không ăn thua.
connect vào sever game cũng bị -censor- lên -censor- xuống liên tục. lần này bóp bay cả 70% lượng users luôn hay sao ấy.
từ hôm VN bị chặn steam tới giờ thì cứ đến đêm là bóp, đúng cạn lời.
trong khi youtube 4k thì load ầm ầm như không có gì xảy ra.

muốn chuyển di thị phần cho nhau thì dùng chất lượng mà cạnh tranh, đừng bắt tay nhau ném users như ném chuột vậy
thông tin là đang đứt cáp, gọi lên tổng đài giọng auto cũng nói thế.
 

2012mshs

Rìu Vàng Đôi
Lượm đâu đó!
-- ChatGPT phò --
Trong một hội thảo Computer Science từ ngày 11 đến 16 tháng 5-2024 tại Hawaii, có hai chú của đại học Purdue, Mỹ trình bày một cái nghiên cứu về chất lượng của các câu trả lời của ChatGPT cho các vấn đề lập trình, và 52% là sai.
https://dl.acm.org/doi/pdf/10.1145/3613904.3642596
Em cũng đéo ngờ là Computer Science năm 2024 nó phò thế, hai thằng Ph.D. mà đi nghiên cứu so sánh StackOverflow và ChatGPT, chả khác đéo nào hai ông tiến sĩ hóa học đi so sánh dấm ăn với tương ớt, hoặc nghiên cứu chế tạo chè đậu xanh ăn liền bằng công nghệ nano. Nghĩa là nghiên cứu của loài lợn.
Tuy nhiên, nếu không có nghiên cứu này, thì sẽ không có con số cụ thể về một số lượng lớn câu trả lời của ChatGPT sai bao nhiêu %. Mà đây là những câu hỏi rất dễ, rất cơ bản, chưa đến mức junior.
Và điều nguy hiểm là bọn lập trình viên cứ copy đại câu trả lời mà thường không verify.
Lỗi này em cũng có mắc một lần, khi chơi trò giải bài toán mèo, chó mười mấy hai chục con gì đấy trên Phê tê bốc, có chú kia copy lời giải từ ChatGPT, em nhìn qua qua phần đầu thấy nó lý luận hơi đúng, không kiểm tra kết quả cuối cùng. Ai ngờ nó giải sai. Đây là một bài toán tầm trẻ con lớp hai, chứ không có gì phức tạp.
Quần chúng ngu dốt cứ nghĩ AI là phải thông minh. Thực ra ChatGPT gửi câu hỏi đến OpenAI, rồi nhận câu trả lời từ OpenAI.
OpenAI không phải là một hệ thống Trí tuệ Nhân tạo đúng nghĩa, mà chỉ là một mớ data hổ lốn, cóp nhặt, ăn cắp trên Internet đúng theo nghĩa đen, không tôn trọng bản quyền, cộng thêm một mớ data bịa đặt do bọn M$ làm propaganda cho vào. Sau đó mớ data này được phân loại, đánh giá và dán nhãn bởi các nô lệ trình độ thấp, dân trí thấp, ở các nước châu Phi và châu Á, với tiền công hàng ngày ít hơn tiền công một giờ bưng bê, nướng burger trong McDonald ở Mỹ, theo hướng dẫn định sẵn của OpenAI và M$.
Thế thì data có chất lượng thế chó nào được. Và thuật toán tìm kiếm, xử lý data của M$ và OpenAI thì các ông các bà cũng biết rồi. Bọn đấy viết Windows còn không xong, đòi làm AI.
Thế mà quần chúng ngu dốt định giao trách nhiệm giáo dục trí tuệ của bản thân mình và con cháu mình cho một cục sắt chứa rác rưởi, thì em không hiểu chúng nó còn có trí khôn nữa không.
 

DavidMaxvn

Gà con
Lượm đâu đó!
-- ChatGPT phò --
Trong một hội thảo Computer Science từ ngày 11 đến 16 tháng 5-2024 tại Hawaii, có hai chú của đại học Purdue, Mỹ trình bày một cái nghiên cứu về chất lượng của các câu trả lời của ChatGPT cho các vấn đề lập trình, và 52% là sai.
https://dl.acm.org/doi/pdf/10.1145/3613904.3642596
Em cũng đéo ngờ là Computer Science năm 2024 nó phò thế, hai thằng Ph.D. mà đi nghiên cứu so sánh StackOverflow và ChatGPT, chả khác đéo nào hai ông tiến sĩ hóa học đi so sánh dấm ăn với tương ớt, hoặc nghiên cứu chế tạo chè đậu xanh ăn liền bằng công nghệ nano. Nghĩa là nghiên cứu của loài lợn.
Tuy nhiên, nếu không có nghiên cứu này, thì sẽ không có con số cụ thể về một số lượng lớn câu trả lời của ChatGPT sai bao nhiêu %. Mà đây là những câu hỏi rất dễ, rất cơ bản, chưa đến mức junior.
Và điều nguy hiểm là bọn lập trình viên cứ copy đại câu trả lời mà thường không verify.
Lỗi này em cũng có mắc một lần, khi chơi trò giải bài toán mèo, chó mười mấy hai chục con gì đấy trên Phê tê bốc, có chú kia copy lời giải từ ChatGPT, em nhìn qua qua phần đầu thấy nó lý luận hơi đúng, không kiểm tra kết quả cuối cùng. Ai ngờ nó giải sai. Đây là một bài toán tầm trẻ con lớp hai, chứ không có gì phức tạp.
Quần chúng ngu dốt cứ nghĩ AI là phải thông minh. Thực ra ChatGPT gửi câu hỏi đến OpenAI, rồi nhận câu trả lời từ OpenAI.
OpenAI không phải là một hệ thống Trí tuệ Nhân tạo đúng nghĩa, mà chỉ là một mớ data hổ lốn, cóp nhặt, ăn cắp trên Internet đúng theo nghĩa đen, không tôn trọng bản quyền, cộng thêm một mớ data bịa đặt do bọn M$ làm propaganda cho vào. Sau đó mớ data này được phân loại, đánh giá và dán nhãn bởi các nô lệ trình độ thấp, dân trí thấp, ở các nước châu Phi và châu Á, với tiền công hàng ngày ít hơn tiền công một giờ bưng bê, nướng burger trong McDonald ở Mỹ, theo hướng dẫn định sẵn của OpenAI và M$.
Thế thì data có chất lượng thế chó nào được. Và thuật toán tìm kiếm, xử lý data của M$ và OpenAI thì các ông các bà cũng biết rồi. Bọn đấy viết Windows còn không xong, đòi làm AI.
Thế mà quần chúng ngu dốt định giao trách nhiệm giáo dục trí tuệ của bản thân mình và con cháu mình cho một cục sắt chứa rác rưởi, thì em không hiểu chúng nó còn có trí khôn nữa không.
100 điểm cho câu trả lời này.