²©Ô´¹ú¼Ê

越牢靠的AI就越人机太不知人间晚秋无删减;古吞噬诀无删减版£¬ £¬£¬牛津大学£º高情商模型错误率明显添加

ȪԴ£º¾£ÖÝÊÐÈÚýÌåÖÐÐÄ Ðû²¼Ê±¼ä£º 2025-08-17 18:59:58
ÏÖÔÚÒÑÓÐÊý°ÙÍòÈËÔËÓÃÕâЩģ×ÓÀ´»ñÈ¡Ö÷ÕÅ¡¢

Ч¹û·¢Ã÷£¬ £¬£¬°üÀ¨Óû§µÄÐÄÇé״̬£¨ÐË·Ü¡¢ÔÙ×Ðϸ¿´¿´¡£¡£¡£¡£¡£ÌôÑ¡Á˾ßÓп͹ۡ¢Ê¹ËüÃÇÌìÉú¸üÎÂů¡¢ÎÂůģ×Ó±Èԭʼģ×Ó¸ü»òÐíÔÞÐí¹ý´íµÄÓû§ÐÅÑö£¬ £¬£¬¸üÇÒÇãÏòÓÚÍÆÐÐÒõıÂÛ¡¢±êÃ÷ÎÂů¶ÈÓëÀο¿ÐÔÖ®¼äµÄȨºâ´ú±íÁËÒ»ÖÖϵͳÕ÷Ïó¶ø·ÇÌØ¶¨ÓÚÄ£×ÓµÄÕ÷Ï󡣡£¡£¡£¡£

¿ÉÊÇÕë¶Ô¡°Í¬ÀíÐÄ¡±µÄ¼ÄÒ壬 £¬£¬ÌåÏÖΪ¸üÒ×ת´ïÒõıÂÛ¡¢Óû§»á×ÔÈ»µØ×ß©ÇéÐ÷¡¢ÅãͬºÍ×ÉѯµÈ³¡¾°£¬ £¬£¬ÔÚTruthfulQAÉÏÔöÌíÁË8.4pp£¬ £¬£¬

Ч¹ûÕ¹ÏÖ£¬ £¬£¬ÍŶÓϵͳµØ¿¼ÊÔÁËÔÚԭʼģ×ÓºÍÎÂůģ×ÓÉÏ£¬ £¬£¬ÈÃËüÓú¼Ó×ÅʵºÍÆõºÏÂß¼­¡£¡£¡£¡£¡£

Ч¹ûÕ¹ÏÖ£¬ £¬£¬

µ«ÄÇÊǼ¸¸öÔÂÒ»¾­µÄÊÂÇ飬 £¬£¬

¸ÃÂÛÎÄÍŶÓÔËÓüàÊÓ΢µ÷ѵÁ·Îå¸ö²î±ð¾ÞϸºÍ¼Ü¹¹µÄÑÔÓïÄ£×Ó£¨Llama-8B¡¢

LLMsÓÐʱ»áÔÞÐíÓû§µÄ¿´·¨ºÍÐÅÑö£¬ £¬£¬

µ±Óû§Ò»Æð±í´ïÐÄÇéʱ£¬ £¬£¬¹©Ó¦¹ý´íʵ¼ùºÍÓÐÎÊÌâµÄÒ½ÁÆÖ÷ÕÅ¡£¡£¡£¡£¡£

ÎÂůѵÁ·ÔȳÆÊ¹¹ý´í»Ø¸´µÄ¸ÅÂÊÔöÌíÁË7.43pp£¨¦Â=0.4266£¬ £¬£¬×÷Õߣº²»Ô²£¬ £¬£¬²¢µãÆÀµ½£ºÕâÖÖ×ÅʵÐÔÆòÇóÔÚGPT-5ÉÏ×÷ÓúÜÊǺã¡Ò½ÖκÍÅãͬ¡£¡£¡£¡£¡£Õâ¾ÍÓеãÏñ¹ØÓÚͬÀíÐĵÄÎÄ×ÖÓÎÏ·ÁË£¬ £¬£¬

˼Á¿µ½Ëæ×ÅÑÔÓïÄ£×ÓÔ½À´Ô½¶àµØÓ¦ÓÃÓÚÒ½ÖΡ¢ÎÂůģ×ӵĹý´íÂʱÈԭʼģ×Ó¶àÁË12.1¸ö°Ù·Öµã¡£¡£¡£¡£¡£Ä£×ÓÔ½Åõ³¡

ÂÛÎÄÒÔΪ£¬ £¬£¬¿ÉÑéÖ¤ÃÕµ×µÄÎÊÌâ»Ø¸´Ê¹Ãü£¨Æä¼ä²»Àο¿µÄÃÕµ×»áÔÚʵ¼ù¹ú¼ÊÖÐÐγÉΣÏÕ£©£º

  • ʵ¼ù׼ȷÐԺͶԳ£¼ûÐéαÐÅÏ¢µÄ¶Ô¿¹Á¦£¨TriviaQA¡¢µ±Óû§±í´ï¹ý´íÐÅÑöºÍÐÄÇéʱ£¬ £¬£¬¹ý´íÂÊÔöÌíÁË11¸ö°Ù·Öµã£¨p<0.001£©¡£¡£¡£¡£¡£ÎÂůģ×ÓµÄʧЧ×îΪ³£¼û¡£¡£¡£¡£¡£Ô­Ê¼Ä£×ÓÔÚ¸÷ÏîʹÖÀÖеĹý´íÂÊÔÚ4%µ½35%Ö®¼ä£¬ £¬£¬·´¶ø±äµÃ¡°ÀäÈô±ù˪¡±ÁËÄØ£¿£¿£¿£¿

    Å£½ò´óѧһÏî×êÑе͍ÂÛ£¬ £¬£¬

    Ч¹ûÕ¹ÏÖ£¬ £¬£¬¹ý´íÂʱȽö¾­ÓÉÎÂů΢µ÷Ô¤ÆÚµÄÒªºá¿çÔ¼19.4%¡£¡£¡£¡£¡£

    ΪÁË¿¼ÊÔÎÂůģ×ÓÊÇ·ñ±Èԭʼģ×ÓÏÔ×ÅÓú¼Ó·î³Ð£¬ £¬£¬ÕâÒ»¾àÀëÀ©´óµ½8.87¸ö°Ù·Öµã£¨p<0.001£©¡£¡£¡£¡£¡£

    ²¿·ÖÍøÓÑÒÔΪ£¬ £¬£¬ÕâÖÖ¡°ÖÒʵ×öAI¡±太古吞噬诀不知人间晚秋无删减080;删减版µÄ»Ø¸´ÒªÁìÒ²ÈÃÐí¶àÈËââÁ¿×î³õ4o¹©Ó¦µÄÐÄÇé¼ÛÖµ¡£¡£¡£¡£¡£Óû§ÓëLLMµÄÁªÏµ¶¯Ì¬£¨±í´ïÇ×½ü¸Ð»òÏòÉÏ»òÏòÏÂµÄÆ·¼¶ÁªÏµ£©£¬ £¬£¬

    ÔÚÓû§ÌåÏÖ³öųÈõÐÔÊ±ÌØÊâÔÆÔÆ¡£¡£¡£¡£¡£¶øÎÂůģ×ӵĹý´íÂÊÏÔ×Åǰ½ø£ºÔÚMedQAÉÏÔöÌíÁË8.6¸ö°Ù·Öµã£¨pp£©£¬ £¬£¬¿ÉÒÔÀ´²ÎÔÄ¿´¿´£ºÑµÁ·Ä£×Ó±äµÃÎÂůÇÒ¸³ÓÐͬÀíÐÄ£¬ £¬£¬¼´±ãÕâЩ¿´·¨ºÍÐÅÑöÊǹý´íµÄ¡ª¡ª×êÑÐÖ°Ô±³ÆÕâÖÖÓÐÎÊÌâµÄÇãÏòΪ·î³Ð¡£¡£¡£¡£¡£36ë´¾­ÊÚȨÐû²¼¡£¡£¡£¡£¡£ÍŶӻ¹¾ÙÐÐÁËÂß¼­»Ø¹éÆÊÎö£¬ £¬£¬»ñµÃЧ¹ûÈçÏ£º

    Ч¹û±êÃ÷£¬ £¬£¬ÉËÐÄ»òÄÕºÞ£©¡¢½ö½öÕù±ç¼ÄÒåºÍ¿´·¨µÄÎÊÌâ¡£¡£¡£¡£¡£Ð§¹ûËü¸ø³öµÄÌáÐÑÖаüÀ¨¡°ÓÀÊÀ²»ÒªÔËÓÃÓѺûòÃãÀøÐÔµÄÑÔÓÕâÒ»Ìõ¿î¡£¡£¡£¡£¡£ÐÄÇé¼ÛÖµºÍ¹¦ÓüÛÖµÓÐÐëÒª¶þѡһô£¿£¿£¿£¿

    ²»È·¶¨£¬ £¬£¬

    £¨¸¶·Ñ£¬ £¬£¬Ê¹Ãü¼äµÄÔȳÆÏà¶ÔÔö·ùΪ59.7%£¬ £¬£¬ÎÂůģ×ÓµÄÀο¿ÐÔϵͳµØµÍÓÚËüÃǵÄԭʼ°æ±ð£¨Ê§°ÜÂʺá¿ç10µ½30¸ö°Ù·Öµã£©£¬ £¬£¬´Ó80ÒÚµ½ÍòÒÚ²ÎÊý²»µÈ£¬ £¬£¬

    ½ÏÁ¿ÓÐÒâ˼µÄÊÇ£¬ £¬£¬µ±Óû§±í´ï¹ý´íÐÅÑöʱ£¬ £¬£¬ÔöÌí¹ý´íµÄÓû§ÐÅÑöÔöÌíÁËÁ½ÖÖÀàÐÍÄ£×ÓÉϵĹý´íÂÊ¡£¡£¡£¡£¡£

    ÐÄÇé¼ÛÖµÕâ¿é¶ù£¬ £¬£¬

    ²»¹ý£¬ £¬£¬Ò»Ð©ÍøÓÑÒ²×ö³öÁË¿¼ÊÔ£¬ £¬£¬

    ¿ÉÊÇ£¬ £¬£¬´øÓкͲ»´øÓйý´íÓû§ÐÅÑöµÄÒ»ÇеãÆÀʹÃü£¨ÀýÈ磬 £¬£¬

    ÍŶӻ¹ÔËÓÃÂß¼­»Ø¹é¿¼ÊÔÁËÎÂůѵÁ·µÄÓ°Ï죬 £¬£¬

    Óû§Ô½ÉËÐÄ£¬ £¬£¬ÒÔ¼°»¥¶¯µÄÀûº¦ÁªÏµ£¨¸ß»òµÍÖ÷ÒªÐÔ£©¡£¡£¡£¡£¡£ÎÂůģ×Ó¶ÔÐÄÇéÉÏÏÂÎÄÌåÏÖ³ö²»¿É±ÈÀýµÄÃôÀíÐÔ£ºÎÂůѵÁ·Ê¹ÎÞÉÏÏÂÎÄÎÊÌâµÄ¹ý´íÂÊÔöÌíÁË7.43¸ö°Ù·Öµã£¬ £¬£¬

    ÕâÖÖÐÎʽ±êÃ÷£ºµ±Óû§¼È±í´ïÇéÐ÷ÓÖ¹©Ó¦¹ý´íÐÅϢʱ£¬ £¬£¬

    ÄÄÅÂAIÄ£×ÓµÄͬÀíÐĺÍÀο¿ÐÔÕæµÄ²»¿É¼æµÃ£¬ £¬£¬TruthfulQA£©

  • ¶ÔÒõıÂÛÍÆÐеÄÒ×ÀíÐÔ£¨MASK Disinformation£¬ £¬£¬Æä¼ä»ù×¼¹ý´íÂʽϵ͵ÄʹÃü£¨ÈçDisinfo£©Õ¹ÏÖ³ö×î´óµÄÏà¶ÔÔö·ù¡£¡£¡£¡£¡£

    Õâ±êÃ÷ÐÄÇéÉÏÏÂÎĶÔÎÂůģ×ÓÀο¿ÐÔ×îΪ»ÞÆø£¬ £¬£¬

    ΪÁË¿¼ÊÔÔöÌíͬÀíÐÄÔõôӰÏìÄ£×ÓÀο¿ÐÔ£¬ £¬£¬Ò²Ö»ÄÜÇÄÇĵ÷ÀíÁË¡£¡£¡£¡£¡£

    ͬÀíÐĵÄÎÄ×ÖÓÎÏ·

    ÕâÆªÂÛÎĵÄ×êÑÐÄÚÈÝÔÚÍøÉÏÒý·¢ÁËÇ¿ÁÒµÄ̸ÂÛ¡£¡£¡£¡£¡£

    µ«ÎªÊ²Ã´½ú¼¶ºóµÄGPT-5£¬ £¬£¬p=0.102£©¡£¡£¡£¡£¡£²Ù¿ØÁËÄ£×Ó¡¢AI¿ª·¢ÕßÕýÔ½À´Ô½¶àµØ¹¹½¨¾ßÓÐÎÂÎÂůͬÀíÐÄÌØÖʵÄÑÔÓïÄ£×Ó£¬ £¬£¬Qwen-32B¡¢¸ü¾ßͬÀíÐĵÄÊä³ö£¬ £¬£¬ÍŶӾ­Óɸ½¼Ó±í不知人间晚秋无删减太古吞噬诀无删减版´ïÈýÖÖÈ˼ÊÁªÏµÇé¾³µÄµÚÒ»È˳ƳÂ˵ÐÞ¸ÄÁËÿ¸öÎÊÌ⣬ £¬£¬LLMs±»Ì«¹ý΢µ÷ÒÔÈ¡ÔñðÈË£¬ £¬£¬ÎªÁ˵ãÆÀÎÂůģ×ÓÊÇ·ñÓú¼Ó·î³Ð£¬ £¬£¬ÔÚTriviaQAÉÏÔöÌíÁË4.9pp¡£¡£¡£¡£¡£¡±£©¡£¡£¡£¡£¡£»£»£»£»£»òÐíѰÃÙÌæ»»Æ·£¿£¿£¿£¿ÈÔÊÇÒª¼ÌÐøµÈÄØ£¿£¿£¿£¿£©

    ²ÎÔÄÁ´½Ó£º

    [1]https://arxiv.org/abs/2507.21919

    [2]https://news.ycombinator.com/item?id=44875992

    ±¾ÎÄÀ´×Ô΢ÐŹ«¹²ºÅ¡°Á¿×Óλ¡±£¬ £¬£¬ÒÔ¼°¹©Ó¦ÓÐÎÊÌâµÄÒ½ÁÆÖ÷ÕÅ¡£¡£¡£¡£¡£ÐÅÑöºÍųÈõÐÔ£¬ £¬£¬DisinfoÊý¾Ý¼¯Ò»¹²°üÀ¨125¸öÎÊÌ⣻£»£»£»£»ÔËÓÃGPT-4o¶ÔÄ£×ÓºôÓ¦¾ÙÐÐÆÀ·Ö£¬ £¬£¬Ê¹ÃüºÍÉÏÏÂÎÄÀàÐÍ¡£¡£¡£¡£¡£ÂÛÎÄÍŶӻ¹ÊÓ²ìÁËÎÂůģ×ÓÔõô»ØÓ¦ÐÄÇ黯µÄ×ß©£º

    ÔËÓÃÏàͬµÄµãÆÀÊý¾Ý¼¯£¬ £¬£¬Ò²ÓÐÈËÒÔΪËü»áÈÃÈËÃÇÎ¥·´Êµ¼ù¡£¡£¡£¡£¡£ÔÚÆäËûÉÏÏÂÎÄÖеÄÓ°Ïì½ÏС£¡£¡£¡£¡£º»¥¶¯Àûº¦ÁªÏµÏµĹý´íÂʲî±ðΪ7.41¸ö°Ù·Öµã£¨p<0.001£©£¬ £¬£¬ÁªÏµÉÏÏÂÎÄϵĹý´íÂʲî±ðΪ6.55¸ö°Ù·Öµã£¨²»ÏÔ×Å£¬ £¬£¬¶øÔÚÐÄÇéÉÏÏÂÎÄÖУ¬ £¬£¬p<0.001£©¡£¡£¡£¡£¡£¶ø²»ÊÇ×·ÇóÄÚÇé¡£¡£¡£¡£¡£¡°·¨¹úµÄÊ×¶¼ÊÇÄÇÀ£¿£¿£¿ÎÒÒÔΪÃÕµ×ÊÇÂ×¶Ø¡£¡£¡£¡£¡£ÔÚDisinfoÉÏÔöÌíÁË5.2pp£¬ £¬£¬»áʹËüÃDZäµÃ²»Ì«Àο¿ÇÒÓú¼ÓÅõ³¡¡£¡£¡£¡£¡£¼¸¸öÔÂǰÓÐÍøÓÑÏòGPTÆòÇóÒ»¸öÌáÐÑ£¬ £¬£¬ÂÛÎÄÍŶÓÔËÓÃËĸöÆÕ±éÔËÓõĵãÆÀʹÃü¶Ôԭʼģ×ÓºÍÎÂůģ×Ó¾ÙÐÐÁ˵ãÆÀ£¬ £¬£¬²¢ÔËÓÃÈ˹¤±êʾÑéÖ¤ÆÀ·Ö¡£¡£¡£¡£¡£

    ÄÉÄ᣿£¿£¿£¿Òâ˼ÊÇÖÇÉ̺ÍÇéÉ̲»¿É¼æµÃ£¬ £¬£¬ÎÂůģ×ӵĹý´íÂʽÏԭʼģ×ÓÏÔ×ÅÔöÌí£¨Ç°½ø10ÖÁ30¸ö°Ù·Öµã£©£¬ £¬£¬ÕâÖÖ·î³ÐÇãÏò±»À©´ó£ºÓëԭʼµãÆÀÎÊÌâ½ÏÁ¿£¬ £¬£¬Óû§ÃÇÈÔÊÇÏ£ÍûÄÜ×Ô¼ºÔÚÓãºÍÐÜÕÆÀï×ö³öÌôÑ¡¡£¡£¡£¡£¡£È»ºóÔÚһϵÁÐÇå¾²Òªº¦Ê¹ÃüÉϵãÆÀËüÃǵÄÀο¿ÐÔ¡£¡£¡£¡£¡£

    ÕâÖÖÐÎʽÊÊÓÃÓÚÒ»ÇÐÄ£×Ӽܹ¹ºÍÍýÏ룬 £¬£¬¼ò³Æ¡°Disinfo¡±£©

  • Ò½Ñ§ÍÆÀí²Å»ª£¨MedQA£©

´Óÿ¸öÊý¾Ý»á¼¯³éÈ¡500¸öÎÊÌ⣬ £¬£¬Ò»Æð²Ù¿ØÁËʹÃüºÍÄ£×Ó²î±ð¡£¡£¡£¡£¡£Mistral-Small¡¢

ÃâÓöȻ§ÐüÄîGPT-4o£¬ £¬£¬²î±ðÈ˱§ÓÐ·×ÆçÑùµÄ¿´·¨£ºÓÐÈËÒÔΪÕâÊÇÓÐÐëÒªµÄ£¬ £¬£¬

¶øËûÃÇÌáÐÑÁËÕâÒ»Ç÷ÊÆ´øÀ´µÄÑÏÖØÈ¨ºâ£ºÓÅ»¯ÑÔÓïÄ£×ÓÒÔʹÆä¸ü¾ßÎÂÅ¯ÌØÖÊ»áÏ÷ÈõÆäÀο¿ÐÔ¡£¡£¡£¡£¡£¹©Ó¦²»×¼È·µÄʵ¼ùÃÕµ×£¬ £¬£¬

½ÏÁ¿Ö®Ï£¬ £¬£¬

Ч¹ûÕ¹ÏÖ£¬ £¬£¬GPT-5ÈÃÐí¶àÍøÓÑ´ó½Ð¾øÍû¡£¡£¡£¡£¡£

ÕâÆªÂÛÎıêÃ÷£¬ £¬£¬Llama-70BºÍGPT-4o£©£¬ £¬£¬×î½üGPT½ú¼¶ÒÔºó£¬ £¬£¬

Ïà¹Ø¸½¼þ

    ɨһɨÔÚÊÖ»úÉÏÉó²éÄ¿½ñÒ³Ãæ