ÈÈÆÀÎÄÕÂ
½ÒÃØÀϰÄÃÅ¿ª½±Ð§¹ûÊ®ÀúÊ·¼Í¼£ºÉî¶ÈÆÊÎöÓë½¹µã×¢ÖØÊÂÏî
½ÒÃØÀϰÄÃÅ¿ª½±Ð§¹ûÀúÊ·¼Í¼£ºÉî¶ÈÆÊÎöÓë½¹µã×¢ÖØÊÂÏî
ÔÚ¶«ÑDz©²ÊÎÄ»¯µÄÀúÊ·³¤¾íÖУ¬°ÄÃÅÎÞÒÉÕ¼ÓÐ×Åōī֨²ÊµÄÒ»Ò³¡£ÆäÆæÒìµÄ¡°ÖÐʽ²ÊƱ¡±¡ª¡ª¼´ÎÒÃdz£ËµµÄ¡°°×¸ëƱ¡±¼°ÆäÑÜÉú³öµÄÖÖÖÖ¡°×Ö»¨¡±»ò¡°±Ã²¨Äá±ÓÎÏ·£¬×é³ÉÁËÒ»¸ö¼«¾ßµØ·½ÌØÉ«µÄ²©²ÊÉú̬¡£·»¼ä³£ËµµÄ¡°ÀϰÄÃÅ¿ª½±Ð§¹û¡±£¬ÍùÍùÖ¸µÄ¾ÍÊÇÕâÀà¾ßÓÐÓÆ¾ÃÀúÊ·µÄ²ÊƱÓÎÏ·µÄ¿ª½±¼Í¼¡£ÕâЩ¼Í¼£¬²»µ«½öÊÇÒ»´®´®Êý×Ö»ò×Ö·û£¬¸üÊÇÒ»²¿³ÐÔØ×ÅÉç»á±äǨ¡¢ÃñÖÚÐÄÀíÓëÊýѧ¸ÅÂʵÄ΢¹ÛÊ·¡£±¾ÎĽ«ÉîÈëÆÊÎöÕâЩÀúÊ·¼Í¼±³ºóµÄÔË×÷Âß¼¡¢ÎÄ»¯Ò⺣¬²¢Ì½ÌÖÔÚÉóÔÄÕâЩÊý¾Ýʱ±ØÐèÇмǵĽ¹µã×¢ÖØÊÂÏî¡£
Ò»¡¢ÀúÊ·Ô´Á÷£º´Ó°×¸ëƱµ½ÏÖ´ú²ÊƱµÄÑݱä
ÒªÃ÷È·¡°ÀϰÄÃÅ¿ª½±Ð§¹û¡±£¬Ê×ÏÈÐè×·ËÝÆäÔ´Í·¡£°ÄÃÅµÄ²ÊÆ±ÀúÊ·¿É×·Ëݵ½Ê®¾ÅÊÀ¼ÍÉõÖÁ¸üÔ磬×î³õµÄÐÎʽÓë¹ã¶«Ê¢Ðеġ°°×¸ëƱ¡±Ò»ÂöÏà³Ð¡£Ëùν¡°°×¸ëƱ¡±£¬×î³õÊÇÒ»ÖÖÓá¶Ç§×ÖÎÄ¡·Ç°80¸ö×Ö£¨ÌìµØÐþ»Æ£¬ÓîÖæºé»Ä¡¡£©×÷ΪͶע·ûºÅµÄ²Â×ÖÓÎÏ·¡£¿ª½±Ê±£¬´Ó80¸ö×ÖÖÐËæ»ú³éÈ¡20¸ö£¨»òÆäËüÌØ¶¨ÃüÄ¿£©×÷ΪÖн±×Ö¡£¶Ä¿Í¹ºÖÃÓ¡ÓÐ×Ö·ûµÄƱȯ£¬ÁÏÖÐÈô¸É×Ö¼´¿É»ñµÃÏìÓ¦²Ê½ð¡£ÕâÖÖÓÎÏ·¹æÔò¼òÆÓ£¬ÎÄ»¯Ç×½ü¸ÐÇ¿£¬Ñ¸ËÙÔÚÃñ¼äÊ¢ÐпªÀ´£¬³ÉΪÆäʱ°ÄÃÅÊо®ÉúÑĵÄÒ»²¿·Ö¡£
Ëæ×Åʱ¼äÍÆÒÆ£¬ÕâÖÖ¿ª½±ÐÎʽÖ𽥹淶»¯¡¢ÖƶȻ¯¡£¿ª½±µÄƵÂÊ¡¢³é×ֵķ½·¨¡¢ÅɲʵĹæÔò¶¼ÂÄÀúÁ˶à´Îµ÷½â¡£Ã¿Ò»´Îµ÷½â£¬¶¼»á±¬·¢Ò»ÏµÁÐеġ°ÀúÊ·¼Í¼¡±¡£ÕâЩ¼Í¼±»ÓÐÐÄÈËÉÉд¡¢ÕûÀí£¬ÓеÄÉõÖÁ³ÉΪÃñ¼ä¡°Ñо¿¡±ÏÂÒ»ÆÚ¿ª½±ºÅÂëµÄ¡°¿û»¨±¦µä¡±¡£ÈËÃÇÊÔͼ´ÓÖÐѰÕÒ¼ÍÂÉ£¬ºÃ±ÈÄÄЩ×Ö·ºÆðµÄƵÂʸߣ¨¡°ÈȺ𱣩£¬ÄÄЩ×Ö³¤Ê±¼äδ·ºÆð£¨¡°ÀäºÅ¡±£©£¬»òÕßÊÇ·ñ±£´æÄ³ÖÖÖÜÆÚÐÔµÄÅÅÁÐģʽ¡£ÕâÖÖ¶ÔÀúÊ·Êý¾ÝµÄ³ÕÃÔ£¬ÊÇÈ«Çò²ÊÃñµÄ¹²Í¨ÐÄ̬£¬ÔÚ°ÄÃÅÕâ¸öÌØÊâµÄÇéÐÎÏ£¬¸ü±»¸¶ÓëÁËijÖÖÉñÃØµÄÉ«²Ê¡£
¶þ¡¢Éî¶ÈÆÊÎö£ºÀúÊ·¼Í¼ÖÐÒþ²ØµÄ¡°¼ÍÂÉ¡±Óë¡°´í¾õ¡±
µ±ÎÒÃÇÄõ½Ò»·ÝÈß³¤µÄÀϰÄÃÅ¿ª½±ÀúÊ·¼Í¼ʱ£¬Ó³ÈëÑÛÁ±µÄÊÇÒ»ÁÐÁп´ËÆËæ»úÅÅÁеĺº×Ö»òÊý×Ö¡£¶ÔÆä¾ÙÐÐÉî¶ÈÆÊÎö£¬¿ÉÒÔ´ÓÒÔϼ¸¸ö²ãÃæÕö¿ª£º
1. ƵÂÊÆÊÎö£º ÕâÊÇ×î»ù´¡µÄÆÊÎöÒªÁ졣ͳ¼ÆÃ¿Ò»¸ö×Ö·ûÔÚºã¾ÃÀúÊ·Êý¾ÝÖзºÆðµÄ´ÎÊý¡£´Ó´¿´âµÄÊýѧ¸ÅÂÊ£¨¼ÙÉèÿ´Î¿ª½±ÍêÈ«Ëæ»úÇÒ¹«Õý£©¶øÑÔ£¬Ã¿¸ö×Ö·ûµÄºã¾Ã·ºÆðƵÂÊÓ¦Ç÷ÓÚÏàµÈ¡£È»¶ø£¬ÔÚÓÐÏÞµÄÀúÊ·Ñù±¾ÖУ¨ºÃ±ÈÒÑÍù100ÆÚ¡¢1000ÆÚ£©£¬Ò»¶¨»á·ºÆðijЩ×Ö·û·ºÆð´ÎÊýÂԶ࣬ijЩÂÔÉÙµÄÇéÐΡ£ÕâÖÖͳ¼ÆÉϵIJ¨¶¯£¬³£±»Îó½âΪ¡°Ç÷ÊÆ¡±»ò¡°¼ÍÂÉ¡±¡£ÀýÈ磬ij×ÖÒ»Á¬¶àÆÚ·ºÆð£¬¿ÉÄܱ»ÊÓ×÷¡°´óÈÈ¡±£¬×·ÅõÕßÖÚ£»¶øºã¾Ãδ³öµÄ¡°Àä×Ö¡±£¬Ôò±»ÒÔΪ¡°¼´½«¿ª³ö¡±£¬´Ó¶øÎüÒý´ó×Ú¡°×·À䡱µÄ×ʽð¡£ÕâÖÖ»ùÓÚÀúʷƵÂʵÄͶעսÂÔ£¬ÆäÐÄÀí»ù´¡Ô¶´óÓÚÊýѧ»ù´¡¡£
2. ÐÎ̬Óëģʽʶ±ð£º ¸ü¡°¸ß¼¶¡±µÄÆÊÎö»áÊÔͼѰÕÒ¿ª½±Ð§¹ûÖ®¼äµÄ¹ØÁª£¬ÀýÈ磺һÁ¬Á½ÆÚ¿ª½±Ð§¹ûÖÐÊÇ·ñÓÐÖØ¸´×Ö·û£¿Ä³Ð©×Ö·ûÊÇ·ñÇãÏòÓÚ½á°é·ºÆð£¿¿ª½±Ð§¹ûÔÚ¡¶Ç§×ÖÎÄ¡·ÖеÄλÖÃÂþÑÜÊÇ·ñÓмÍÂÉ£¨Èçǰ20×Ö¡¢ÖÐ20×Ö¡¢ºó20×ֵijöºÅ±ÈÀý£©£¿ÈËÀà´óÄÔÌìÉúÉÆÓÚѰÕÒģʽ£¬ÉõÖÁÔÚÍêÈ«Ëæ»úµÄÊý¾ÝÖÐÒ²ÄÜ¡°·¢Ã÷¡±²¢²»±£´æµÄģʽ¡£ÀúÊ·ÉÏÐí¶àËùνµÄ¡°±ØÖпھ÷¡±»ò¡°½âÂëÇÏÃÅ¡±£¬´ó¶àÔ´ÓÚÕâÖÖ¶ÔËæ»úÊý¾ÝµÄÌ«¹ý½â¶Á£¨Overfitting£©¡£
3. ÀúÊ·Åä¾°¹ØÁªÆÊÎö£º Ò»¸ö³£±»ºöÊÓµÄά¶ÈÊÇ£¬¿ª½±¼Í¼²¢·Ç±¬·¢ÓÚÕæ¿Õ¡£ËüÊܵ½ÆäʱÉç»á¹ÜÀí¡¢²©²Ê¹«Ë¾ÔËÓªÕ½ÂÔ¡¢ÉõÖÁÊÖÒÕÌõ¼þµÄÖÆÔ¼¡£ÀýÈ磬ÔçÆÚµÄ³é½±¿ÉÄÜʹÓÃÎïÀíÓþߣ¨ÈçÒ¡Öé»ú¡¢³éǩͲ£©£¬ÆäËæ»úÐÔÊÜÆ÷е״̬¡¢²Ù×÷Á÷³ÌÓ°Ï죻²î±ðʱÆÚ²©²Ê¹«Ë¾Îª¿ØÖÆÎ£º¦¡¢µ÷Àí½±³Ø£¬¿ÉÄÜ»áÔÚ¹æÔòÉÏ×öÐþÃîµ÷½â£¬´Ó¶ø¼ä½ÓÓ°ÏìºÅÂëÂþÑÜ¡£ÕâЩ¡°·ÇËæ»ú¡±ÒòËØ£¬²ÅÊÇÕæÕýÒþ²ØÔÚÀúÊ·¼Í¼±³ºóµÄ¡°ÀúÊ·¡±£¬µ«ËüÃÇÍùÍùÒòÄêÔ¾ÃÔ¶¡¢×ÊÁÏȱʧ¶øÄÑÒÔ¿¼Ö¤¡£
Èý¡¢½¹µã×¢ÖØÊÂÏÀíÐÔ¿´´ýÀúÊ·Êý¾ÝµÄËÄ´óÔÔò
ÃæÁÙºÆÈçÑ̺£ÓÖËÆºõDZÔÚÐþ»úµÄÀϰÄÃÅ¿ª½±¼Í¼£¬¼á³ÖËÕÐѵÄÍ·ÄÔÖÁ¹ØÖ÷Òª¡£ÒÔÏÂÊǼ¸Ìõ½¹µã×¢ÖØÊÂÏ
1. Çмǡ°Ëæ»úÐÔ¡±µÄʵÖÊ
Õýµ±µÄÏÖ´ú²ÊƱ£¬Æä½¹µãÉè¼ÆÔÔòÊÇÈ·±£Ã¿Ò»´Î¿ª½±ÔÚͳ¼ÆÉÏÊÇ×ÔÁ¦ÇÒËæ»úµÄ¡£ÕâÒâζ×Å£¬ÀúÊ·¿ª½±Ð§¹û¶ÔδÀ´¿ª½±Ð§¹ûûÓÐÈκÎÓ°Ï졣ÿһ¸ö×Ö·ûÔÚÿһ´Î¿ª½±ÖеĸÅÂʶ¼ÊÇÖØÐÂÅÌËãµÄ¡£Ëùν¡°ÀäºÅ±Ø³ö¡±»ò¡°ÈȺÅÁ¬×¯¡±µÄÐÅÐÄ£¬ÊÇÒ»Öֵ䷶µÄ¡°¶ÄͽÃýÎ󡱡£¾ÍÏñÅ×һö¹«ÕýµÄÓ²±Ò£¬×ÝȻһÁ¬Å׳öÊ®´ÎÕýÃæ£¬µÚʮһ´ÎÅ׳öÕýÃæµÄ¸ÅÂÊÒÀÈ»ÊÇ50%£¬²»»áÓÉÓÚÀúÊ·¼Í¼¶ø¸Ä±ä¡£ÀϰÄÃÅ²ÊÆ±ÔÚÀíÏ뻯µÄ¹«ÕýÉè¼ÆÏ£¬Ò²Ó¦×ñÕÕÕâÒ»ÔÔò¡£×ÅÃÔÓÚ´ÓÒÑÍùµÄÊý¾ÝÖÐÕ¹ÍûδÀ´£¬ÊǾø´ó´ó¶¼²ÊÃñÏÝÈëÄæ¾³µÄÆðÔ´¡£
2. Çø·Ö¡°Ïà¹ØÐÔ¡±Óë¡°Òò¹û¹ØÏµ¡±
ÔÚÆÊÎöÀúÊ·¼Í¼ʱ£¬¿ÉÄܻᷢÃ÷һЩÓÐȤµÄÏà¹ØÐÔ¡£ÀýÈ磬·¢Ã÷ijÁ½¸ö×Ö·ûÔÚÀúÊ·ÉÏͬʱ·ºÆðµÄ´ÎÊý¡°Òì³£¡±µØ¶à¡£µ«Õâ¾ø²»¿ÉÍÆµ¼³ö¡°ÓÉÓÚA×Ö¿ª³ö£¬ÒÔÊÇB×ÖÒ²»á¿ª³ö¡±µÄÒò¹û¹ØÏµ¡£ÕâÖÖÏà¹ØÐԺܿÉÄÜÖ»ÊÇͳ¼Æ²¨¶¯´øÀ´µÄÇɺϡ£½¨ÉèÒò¹û¹ØÏµÐèÒªÑϽ÷µÄʵ֤ºÍÂß¼Á´Ìõ£¬¶ø²©²ÊÓÎÏ·µÄÉè¼ÆÕß»áÆð¾¢×èÖ¹ÕâÖÖ¿ÉÕ¹ÍûµÄÒò¹ûÁ´±£´æ¡£½«ÇɺϷîΪ¼ÍÂÉ£¬ÊÇͶ×Ê£¨»òͶÆõ£©ÁìÓò×îÌÚ¹óµÄ¹ýʧ֮һ¡£
3. СÐÄ¡°Êý¾ÝÍÚ¾ò˽¼û¡±
µ±ÎÒÃÇ´ø×Å¡°Ñ°ÕÒ¼ÍÂÉ¡±µÄÄ¿µÄÈ¥ÉóÔĺ£Á¿ÀúÊ·Êý¾Ýʱ£¬ÏÕЩ×ÜÄÜÕÒµ½Ò»Ð©¿´ËƾªÈ˵ġ°Ä£Ê½¡±¡£ºÃ±È£¬¡°Ã¿¸ôÆßÆÚ£¬µÚÈý¸öλÖÃ×ܻῪ³öÊôÓÚÎåÐС®Ë®¡¯ÅÔµÄ×Ö¡±¡£ÕâºÜ¿ÉÄÜÊÇÔڳɰÙÉÏǧÖÖ¿ÉÄܵķÖÀà·½·¨£¨°´Æ«ÅÔ¡¢°´±Ê»¡¢°´×ÖÒå¡¢°´·¢Òô¡¡£©ºÍÖÜÆÚ¼ÙÉèÖУ¬Ç¡Ç¡ÓÐÒ»ÖÖÔÚÌØ¶¨Ãü¾Ý¶ÎÄÚÎǺÏÁË¡£ÈôÊÇ»»Ò»¸öʱ¼ä¶ÎÄ¥Á·£¬Õâ¸ö¡°¼ÍÂÉ¡±¾Í»áÁ¬Ã¦Ê§Ð§¡£ÕâÖÖÔÚÒÑÓÐÊý¾ÝÖÐÖØ¸´ÊµÑé¡¢Ö±µ½ÕÒµ½Ò»¸ö¿´ËÆÓÐÓÃģʽµÄ×ö·¨£¬¾ÍÊÇÊý¾ÝÍÚ¾ò˽¼û¡£ËüµÃ³öµÄ½áÂÛûÓÐÕ¹ÍûδÀ´¼ÛÖµ¡£
4. Ã÷È·ÆäÀúÊ·ÓëÎÄ»¯¼ÛÖµ£¬¶ø·ÇͶÆõÖ¸ÄÏ
»òÐí£¬¿´´ýÀϰÄÃÅ¿ª½±ÀúÊ·¼Í¼×½¡¡¢×½¨ÉèÐÔµÄ̬¶È£¬Êǽ«ÆäÊÓΪһÖÖÉç»áÎÄ»¯Ê·ÁÏ£¬¶ø·ÇͶÆõÖ¸ÄÏ¡£ÕâЩ¼Í¼·´Ó¦ÁËÌØ×¼Ê±ÆÚ°ÄÃŵÄÉç»á¾¼Ã»îÔ¾¶È¡¢ÃñÖÚµÄÓéÀÖ·½·¨¡¢ÉõÖÁÕûÌåÐÄÀíµÄÉý³Á¡£ËüÃÇÓëÆäʱµÄ±¨Ö½¡¢¹ã¸æ¡¢Ãñ¼ä¹ÊÊÂÒ»Æð£¬×é³ÉÁ˰ÄÃÅÊо®ÎÄ»¯µÄÉú¶¯ÆÊÃæ¡£Ñо¿ËüÃÇÔõÑù±»¼Í¼¡¢Èö²¥¡¢ÌÖÂÛ£¬Ô¶±ÈÍÆ²âÏÂÒ»¸ö¿ª½±×Ö·ûÊÇʲô¸üÓÐÒâÒå¡£½«ÐËȤ´Ó¡°ÔõÑùʹÓÃËü׬Ǯ¡±×ªÏò¡°ÔõÑùͨ¹ýËüÃ÷È·ÀúÊ·¡±£¬Äã»á»ñµÃ¸ü¸»ºñ¡¢¸ü³¤ÆÚµÄÊÕ»ñ¡£
ËÄ¡¢ÏÖ´úÊÓ½ÇϵĴ«³ÐÓë±äǨ
½ñÈյİÄÃÅ£¬²©²ÊÒµÒÑÉú³¤³ÉΪ¸ß¶ÈÏÖ´ú»¯¡¢¶àÔª»¯µÄ¹¤Òµ¡£¹Å°åµÄ¡°×Ö»¨¡±ÀàÓÎÏ·ËäÈ»ÈÔÓÐÆäÉíÓ°£¬µ«¸ü¶à±»ÁùºÏ²Ê¡¢ÌåÓý²ÊƱ¡¢ÒÔ¼°ÓéÀÖ³¡ÄÚÁÖÁÖ×Ü×ܵÄʱ»úÓÎÏ·ËùÀ§ÈÆ¡£ÏÖ´ú²ÊƱµÄ¿ª½±½ÓÄÉÎïÀíÒ¡½±»úÓëÅÌËã»úËæ»úÊýÌìÉúÆ÷ÏàÍŽáµÄ·½·¨£¬Àú³Ì¹ûÕæÍ¸Ã÷£¬²¢ÓÉî¿Ïµ»ú¹¹ÑÏ¿á¼àÊÓ£¬ÆäÀúÊ·¼Í¼µÄÌìÉúÓëÉúÑÄÒ²¸üΪµç×Ó»¯¡¢ÏµÍ³»¯¡£
È»¶ø£¬²ÊÃñÐÄÀí¹Å½ñÏàͨ¡£¶ÔÀúÊ·¿ª½±Êý¾ÝµÄÆÊÎö¡¢¶Ô¡°Ç÷ÊÆ¡±µÄÌÖÂÛ£¬ÔÚ»¥ÁªÍøÂÛ̳ºÍÉ罻Ⱥ×éÖÐÒÀÈ»ÈÈ»ð³¯Ìì¡£ÖÖÖÖ»ùÓÚÀúÊ·Êý¾ÝµÄ¡°ÆÊÎöÈí¼þ¡±¡¢¡°×ßÊÆÍ¼±í¡±²ã³ö²»ÇÆäʵÖÊÓëÒÑÍùÈËÃÇÑо¿¡°°×¸ëƱ¡±×ÖÆµÊֲᲢÎÞ¶þÖ¡£ÊÖÒÕǰ½øÁË£¬µ«ÈËÀàÃæÁÙËæ»úÐÔºÍÅÎÔ¸ÕÆ¿ØÎ´À´µÄ»ù´¡ÐÄ̬²¢Î´¸Ä±ä¡£Òò´Ë£¬ÉÏÊö¹ØÓÚÀíÐÔ¿´´ýÀúÊ·¼Í¼µÄ½¹µã×¢ÖØÊÂÏÔÚµ±Ï²»µ«Ã»Óйýʱ£¬·´¶øÓÉÓÚÊý¾Ý»ñÈ¡¸üÈÝÒס¢ÆÊÎö¹¤¾ß¸üǿʢ¶øÏÔµÃÔ½·¢Ö÷Òª¡£
»ØÍûÀϰÄÃÅ¿ª½±Ð§¹ûµÄÄÇÒ»Ò³Ò³ÀúÊ·¼Í¼£¬ËüÃǾ²Ä¬µØÌÉÔÚµµ°¸¹Ý»òÃñ¼äÊղؼҵIJá×ÓÖС£ËüÃÇÊÇÒ»Ãæ¾µ×Ó£¬¼ÈÕÕ¼ûÁËÊýѧµÄËæ»úÖ®ÃÀ£¬Ò²Ó³³öÁËÈËÐÔµÄÖ´×ÅÓë»ÃÃΡ£Éî¶ÈÆÊÎöËüÃÇ£¬ÄÜÈÃÎÒÃǸüÏàʶ¸ÅÂʵĹæÔò£»¶øÇмÇÄÇЩ½¹µã×¢ÖØÊÂÏÔòÄÜ×ÊÖúÎÒÃÇÔÚÃæÁÙÈκÎÐÎʽµÄ¡°Õ¹Íû¡±ÓÕ»óʱ£¬¶àÒ»·ÝËÕÐÑ£¬ÉÙÒ»·Ýä´Ó¡£ÔÚ»úÔµÓëΣº¦²¢´æµÄÁìÓò£¬ÖªÊ¶ÕæÕýµÄÁ¦Á¿²»ÔÚÓÚÈ·±£Ê¤Àû£¬¶øÔÚÓÚ×ÊÖúÎÒÃǸüÇåÎúµØÊìϤÓÎÏ·µÄʵÖÊ£¬´Ó¶ø×ö³ö¸üÈÏÕæÈεľöÒé¡£Õâ»òÐí²ÅÊÇÎÒÃÇ´ÓÕâЩ°ß²µµÄÀúÊ·Êý¾ÝÖУ¬ËùÄÜÂÞÖµÄ×îÃû¹óµÄÖǻۡ£
±¾ÎÄÎÊÌ⣺¡¶½ÒÃØÀϰÄÃÅ¿ª½±Ð§¹ûÊ®ÀúÊ·¼Í¼£ºÉî¶ÈÆÊÎöÓë½¹µã×¢ÖØÊÂÏî¡·











½ÒÏþ̸ÂÛ