NLP 绠楁硶宸ョ▼甯堢殑瀛︿範銆佹垚闀垮拰瀹炴垬缁忛獙
Posted 鏈哄櫒瀛︿範AI绠楁硶宸ョ▼
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了NLP 绠楁硶宸ョ▼甯堢殑瀛︿範銆佹垚闀垮拰瀹炴垬缁忛獙相关的知识，希望对你有一定的参考价值。
鍚慉I杞瀷鐨勭▼搴忓憳閮藉叧娉ㄤ簡杩欎釜鍙?/span>馃憞馃憞馃憞
鎴戜滑鏈鍒嗕韩涓昏鍒嗕负鍏釜灏忚妭锛屽垎鍒负锛?/p>
1.NLP瑙ｅ喅浠€涔堥棶棰橈紱
2.NLP绠楁硶鍙戝睍绠€鍙诧紱
3.妫€绱㈠紡闂瓟绯荤粺鐨勮涔夊尮閰嶆ā鍨嬶紱
4.浠诲姟鍨嬪璇濈郴缁熻儗鍚庣殑绠楁硶瀹炰緥锛?br class="mq-12">5.鍒涗笟鍏徃NLP宸ョ▼甯堢殑宸ヤ綔鑱岃矗锛?br class="mq-13">6.NLP绠楁硶宸ョ▼甯堥潰璇曟敞鎰忎簨椤癸紱
鍏朵腑鍓嶄袱涓皬鑺備富瑕佸ぇ姒傝杩颁竴涓婲LP杩欎釜瀛︾瀹冭В鍐充簡浠€涔堥棶棰橈紝浠ュ強瀹冪畻娉曞彂灞曠殑绠€瑕佺殑鍘嗗彶锛岃繖鏍峰彲浠ヨ澶у瀵瑰畠鍏堟湁涓€涓暣浣撲笂鐨勮璇嗭紱涓棿涓よ妭浠嬬粛涓€涓嬪湪闂瓟绯荤粺鍜屽璇濈郴缁熶腑NLP鐨勪綔鐢ㄥ拰鍏稿瀷鐨勬ā鍨嬶紱鏈€鍚庝袱鑺傝涓€涓嬬幇鍦ㄥ垱涓氬叕鍙窷LP绠楁硶宸ョ▼甯堢殑宸ヤ綔鑱岃矗鍜屼竴浜涢潰璇曠殑娉ㄦ剰浜嬮」銆?/p>
涓€锛歂LP瑙ｅ喅浠€涔堥棶棰橈紵
NLP鏄竴涓氦鍙夋€х殑瀛︾锛屽畠鍜岃绠楁満绉戝锛屼汉宸ユ櫤鑳斤紝璁＄畻璇█瀛﹁繖涓夐棬閮芥湁浜ゅ弶锛屾槸涓€闂ㄥ缁煎悎瑕佹眰姣旇緝楂樼殑瀛︾銆傚畠鐨勪富瑕佺洰鏍囨槸瑙ｅ喅璁＄畻鏈哄拰浜虹被锛堣嚜鐒讹級璇█鐨勪氦浜掗棶棰橈紝闅忕潃杩戝勾鏉CG鍐呭鐨勮秺鏉ヨ秺澶氾紝NLP鍦ㄥ緢澶х▼搴︿笂闇€瑕佽В鍐虫棤缁撴瀯鍖栫殑璇枡鎬庝箞璁╂満鍣ㄦ洿濂界殑鐞嗚В銆傚洜姝LP瀛︿範璧锋潵涔熸湁浜涢毦搴︼紝涓昏闅剧偣涓猴細
鈼忚瑷€鏈韩澶嶆潅锛氬ぇ瀹舵兂璞′竴涓嬭瑷€鏈韩鏈夊澶嶆潅锛屾瘮濡傛垜浠湪瀛︿範澶栬鐨勬椂鍊欓兘鏈夊悇绉嶅悇鏍风殑璇硶瑙勫垯锛屽氨鍙互鐭ラ亾璁╄绠楁満鍘荤悊瑙ｄ汉绫荤殑鑷劧璇█鏄涔堝鏉傜殑涓€浠朵簨鎯呫€?br class="mq-20">鈼忚澧冪浉鍏筹細鍦ㄤ笉鍚岀殑璇閲岄潰鍚屾牱鐨勪竴鍙ヨ瘽鍙互鏈変笉鍚岀殑鐞嗚В銆?br class="mq-21">鈼忔娊璞℃蹇佃仈绯伙細鎴戜滑鍦ㄦ彁鍒颁竴涓蹇电殑鏃跺€欙紝闇€瑕佹垜浠姒傚康鐨勭浉鍏虫娊璞℃蹇垫湁涓€浜涘巻鍙蹭笂鐨勮璇嗭紝姣斿璇翠互鍓嶈杩囨垨鑰呬互鍓嶇湅杩囩浉鍏崇殑涓滆タ鎵嶈兘鎶婂畠鑱旀兂璧锋潵銆?/p>
鎵€浠ヤ汉璺熶汉涔嬮棿鐨勬甯镐氦娴侀兘闇€瑕佸緢澶氳瑷€鏈韩涔嬪鐨勪笢瑗匡紝鍙互鎯冲儚璁╄绠楁満鏉ュ畬鎴愯繖浠朵簨鎯呴毦搴︽槸闈炲父澶х殑銆?/p>
NLP瑙ｅ喅鐨勪簲涓熀鏈棶棰橈紝杩欎簲涓槸鏉庤埅鑰佸笀鍦ㄥ寳澶х殑AI鍏紑璇句笂鎻愬嚭鏉ョ殑锛屽垎鍒负锛?/p>
鍒嗙被闂锛氬垎绫婚棶棰樺ぇ瀹跺钩鏃惰〃瀹规槗瑙佸埌锛屾瘮濡傛枃鏈垎绫伙紝鎯呮劅鍒嗘瀽鐩殑鏄妸涓€娈垫枃鏈墦涓婁竴涓垨澶氫釜鏍囩銆?br class="mq-26">2.鍖归厤闂锛氭瘮杈冨父瑙佺殑鏄绱紝妫€绱笌鏌愬彞璇濈被浼肩殑璇濇垨鑰呮槸涓庡畠鐩稿叧鐨勫洖绛旓紝杩欎釜灏辨槸鍖归厤銆?br class="mq-27">3.缈昏瘧闂锛氱被浼间簬涓ょ璇█涔嬮棿鐨勭炕璇戯紝鎶婁竴绉嶈瑷€缈昏瘧鎴愯窡瀹冭涔夌浉浼肩殑鍙﹀涓€绉嶃€?br class="mq-28">4.缁撴瀯鍖栭娴嬶細鎶婁竴娈垫枃鏈粨鏋勫寲锛屾墍璋撶殑缁撴瀯鍖栫被姣斾簬涓€娈垫枃鏈腑鐨勮瘝瀵瑰簲鐨勬槸鍔ㄨ瘝杩樻槸鍚嶈瘝锛岃娉曡鑹叉槸涓昏杩樻槸璋撹锛屽皢鍏惰浆鍖栦负缁撴瀯鍖栫殑杈撳嚭搴忓垪銆?br class="mq-29">5.椹皬锛堥┈灏斿彲澶級鍐崇瓥杩囩▼锛氬綋鍓嶈閲囧彇鐨勫姩浣滃拰涓婁竴涓姸鎬佸拰鍔ㄤ綔鐩稿叧锛岃繖鏄竴涓吀鍨嬬殑椹皬閾剧殑杩囩▼銆備唬琛ㄦ€х殑绯荤粺鏄璇濓紝濡備綍鍥炲褰撳墠鐢ㄦ埛鐨勮瘽锛屾槸鍜屾渶杩戠殑涓婁笅鏂囩浉鍏崇殑锛岃繖灏辨槸椹皬鍐崇瓥杩囩▼銆?/p>
缁艰堪涓婇潰鎵€璁茬殑浜斾釜鍩烘湰闂锛岀粨鍚堣繖寮犲浘鏉ョ湅涓€涓嬪畠鐨勫簲鐢ㄥ疄渚嬨€?/p>
杩欏紶鍥句粠涓婂埌涓嬫€诲叡鏈夊洓涓换鍔★紝鏄敤Stanford CoreNLP鏉ユ爣璇嗙殑銆?/p>
鈼忕涓€涓换鍔℃槸璇嶆€ф爣娉紝鎵€璋撶殑璇嶆€ф爣娉紝瀹冩槸涓€涓吀鍨嬬殑搴忓垪浠诲姟锛屾妸涓€娈垫枃鏈腑鐨勬瘡涓€涓瘝鐨勮瘝鎬ф爣娉ㄤ笂锛屽鍚嶈瘝锛屽姩璇嶏紝鍓瘝銆?br class="mq-39">鈼忕浜屼釜浠诲姟鏄粨鏋勬€ч娴嬩换鍔★紝鎶婁竴娈垫枃鏈腑璺熷疄浣撴湁鍏崇殑璇嶏紝鎵撲笂瀹炰綋鐨勬爣绛撅紝濡備汉鍚嶏紝鏈烘瀯鍚嶏紝鍦扮偣锛屾棩鏈熴€?br class="mq-40">鈼忕涓変釜浠诲姟鏄寚浠ｆ秷姝э紝灏嗗彞涓殑3涓唬璇嶅弽鎺ㄥ洖鍘伙紝鍜屼汉鍚嶄竴涓€瀵瑰簲銆?br class="mq-41">鈼忕鍥涗釜浠诲姟鏄彞娉曚緷璧栵紝鎶婃煇浜涜瘝鍜屽叾浠栫殑璇嶆槸淇グ鍏崇郴杩樻槸缁勫悎鍏崇郴锛岀粺绉颁负渚濊禆鍏崇郴锛屽缓鎴愪竴妫典緷璧栨爲銆?/p>
鐢熸椿涓璑LP閮借兘澶熷簲鐢ㄥ湪鍝簺鏂归潰锛熶互鎼滅储寮曟搸涓轰緥锛屽湪浣跨敤鎼滅储寮曟搸鐨勮繃绋嬩腑鑲畾鏈夐亣鍒板嚭閿欒瘝杩欐牱鐨勭籂閿欑畻娉曪紝杩欏氨鏄疦LP鐨勪竴涓簲鐢紝杩樻湁鏂囨湰鍒嗚瘝浠ュ強鎼滅储璇嶆敼鍐欙紝鎵€璋撶殑鎼滅储璇嶆敼鍐欏氨鏄垜浠緭鍏ョ殑璇嶏紝绯荤粺浼氱粰鎴戜滑鍋氭硾鍖栵紝鎶婂悓涔夎瘝涔熻繘琛屾绱紝鎵╁ぇ浜嗘悳绱㈢粨鏋溿€傝繕鏈夋剰鍥捐瘑鍒紝姣斿鍦ㄧ數鍟嗕腑鎼滅储涓€浠跺晢鍝侊紝姣斿鑻规灉锛屾槸鎸囦綘鎯宠涔版墜鏈鸿繕鏄按鏋滐紝鎰忓浘鐨勮瘑鍒巼浼氬奖鍝嶅埌瀹冪殑涓€涓浆鍖栫巼銆傜粨鏋滄帓搴忔槸鏇撮噸瑕佺殑锛屾墍鏈夌殑缃戦〉璐ㄩ噺閮芥湁涓€濂楁帓搴忕畻娉曪紝鎺掑簭绠楁硶涓緢澶氶兘浼氭秹鍙婂埌NLP绠楁硶锛屽挨鍏舵槸鏂囨湰鍒嗘瀽鐩稿叧鐨勬妧鏈€傛渶鍚庤繕鏈夋悳绱㈡帹鑽愶紝姣斿浣犲湪缃戠珯涓婃悳绱竴涓瘝鐨勬椂鍊欙紝涓嬮潰鏈変竴鍧椾細鎻愮ず鍑哄ぇ瀹惰繕鍦ㄦ悳鐨勮瘝锛屼綘鍙兘杩樻兂鎼滅储鐨勮瘝璇紝杩欓兘鏄牴鎹枃鏈浉浼煎害鐨勭悊瑙ｅ幓鍋氱殑銆?/p>
浜岋細NLP绠楁硶鍙戝睍绠€鍙?/span>
NLP绠楁硶瀵逛簬璇█鐨勭悊瑙ｅ垎涓轰笁涓眰娆★紝鍒嗗埆涓猴細
鈼忚娉曪紝鏄寚鎴戞€庢牱璇存槸绗﹀悎璇硶瑙勫垯鐨勶紝绫绘瘮绋嬪簭涓婃病鏈夌紪璇戦敊璇€?br class="mq-50">鈼忚涔夛紝鏄寚鎴戣繖鍙ヨ瘽琛ㄨ揪鐨勬槸浠€涔堟剰鎬濓紝鏄惁鏄纭殑鎰忔€濄€?br class="mq-51">鈼忚鐢紝鏄寚鎴戞妸杩欏彞璇濇斁鍦ㄤ竴涓笂涓嬫枃鐨勭幆澧冧腑杩欐牱璇存槸涓嶆槸鍚堢悊锛屼互鍙婂畠鏄笉鏄綋鍓嶆渶鍚堥€傜殑璇存硶锛岀被姣斾簬鍦ㄧ▼搴忎腑鎴戜滑鍦ㄤ竴涓害鏉熸潯浠朵笅锛屾槸鍚﹀疄鐜颁簡姝ｇ‘鐨勭畻娉曘€?/p>
浠庝笂闈㈢殑鍥剧墖涓垜浠彲浠ョ湅鍑烘潵鐩墠NLP澶勫湪璇箟鐨勯樁娈典腑锛岃嚦浜庤鐢ㄥ睘浜庡垰鍒氳捣姝ョ殑鐘舵€併€?br class="mq-56">
浠庡浘鐗囦笂鍙互鐪嬪埌NLP浠庤鎻愬嚭鍒扮幇鍦ㄥ熀鏈笂缁忓巻浜嗕笁涓樁娈碉紝
鈼忕涓€涓樁娈垫槸鍩轰簬瑙勫垯鐨凬LP
鈼忕浜屼釜闃舵鏄熀浜庣粺璁″涔犳柟娉曠殑NLP
鈼忕涓変釜闃舵鏄秹瓒虫繁搴﹀涔犵殑NLP锛岃繖涓樁娈典粠2012骞村紑濮嬬殑銆?/p>
浠庝笂闈㈣繖寮犲浘涓彲浠ュ緢鏄庢樉鐨勭湅鍑烘繁搴﹀涔犲湪NLP棰嗗煙鐨勫彂灞曡秼鍔裤€?/p>
涓夛細闂瓟绯荤粺鍜屽璇濈郴缁?br class="mq-69">鍏堟潵瑙ｉ噴涓€涓嬩笁涓蹇碉細
1.闂瓟绯荤粺锛屽畠涓昏鏄拡瀵归偅浜涙湁鏄庣‘绛旀鐨勭敤鎴烽棶棰橈紝鑰屼笖閫氬父闈㈠悜鐗瑰畾鐨勯鍩燂紝姣斿閲戣瀺锛屽尰鐤楋紝杩欎竴绫荤殑鏈哄櫒浜恒€傚畠鐨勬妧鏈疄鐜版柟妗堝垎涓哄熀浜庢绱㈠拰鍩轰簬鐭ヨ瘑搴撲袱澶х被銆?br class="mq-71">2.绗簩涓换鍔″瀷瀵硅瘽绯荤粺锛屽ぇ瀹剁湅璁烘枃鐨勬椂鍊欑湅鐨勫ぇ澶氭暟鐨勫璇濈郴缁熼兘鏄换鍔″瀷鐨勶紝瀹冧篃鏄潰鍚戠壒瀹氱殑棰嗗煙锛岃€屼笖鏄潪甯告槑纭殑棰嗗煙銆傚畠鏄互灏藉揩鍦版纭殑瀹屾垚鏄庣‘鐨勪换鍔′负鐩爣鐨勶紝鑰屼笖瀵硅瘽鐨勮疆鏁拌秺鐭秺濂斤紝瀹冪殑搴旂敤瀹炰緥灏辨槸鍚勭鍦ㄧ嚎鐨勭浜哄姪鐞嗘瘮濡傚姪鐞嗘潵涔熴€?br class="mq-72">3.绗笁涓槸鍋忛棽鑱婄殑瀵硅瘽鏈哄櫒浜猴紝瀹冩病鏈夌壒瀹氱殑棰嗗煙鍜屾槑纭殑瀵硅瘽鐩爣锛岃瘎浠锋爣鍑嗕箣涓€灏辨槸鐪嬩汉鍜屼粬鑱婂ぉ鐨勬椂闂撮暱鐭€?/p>
浠庡浘涓婂ぇ瀹跺彲浠ョ湅鍒帮紝妫€绱㈠紡闂瓟绯荤粺鐨勭郴缁熸灦鏋勪富瑕佸垎涓虹绾垮拰鍦ㄧ嚎涓ゅぇ鍧椼€傜绾挎妸闂瓟绱㈠紩锛屽簭鍒楀尮閰嶆ā鍨嬪拰鎺掑簭妯″瀷寤哄ソ锛屽湪绾挎湇鍔℃敹鍒扮敤鎴风殑闂锛屾妸闂涓殑鍏抽敭璇嶄粠绱㈠紩搴撲腑鎶婄浉鍏崇殑绱㈠紩鎷垮嚭鏉ワ紝鐒跺悗鏍规嵁鐢熶骇濂界殑 Matching 鍜?Ranking 妯″瀷鍘诲仛 Rerank 锛屾寫閫夋渶濂界殑绛旀缁欑敤鎴峰睍绀恒€傝繖鏍峰氨鏄绱㈠紡闂瓟绯荤粺鐨勫吀鍨嬫槸瀹炵幇鏂瑰紡銆?/p>
浠庡浘涓ぇ瀹跺彲浠ョ湅鍒版绱㈠紡闂瓟绯荤粺鐨勫疄鐜版柟妗堬紝涓昏鍒嗕负鍥涚鏂规锛?br class="mq-80">
1.寰堢粡鍏革紝寰堜紶缁熺殑瀹炵幇鏂瑰紡锛屾牴鎹渶瑕佺粺璁F-IDF锛屽簲鐢ㄤ竴浜涙瘮杈冪畝鍗曠殑鍚戦噺绌洪棿妯″瀷鎴朆M25鏉ヨ绠楀尮閰嶅害銆?br class="mq-82">2.鏋勯€犱竴浜涚壒寰佸悜閲忥紝鐗瑰緛鍚戦噺鐨勭淮搴﹂渶瑕佹牴鎹笟鍔℃潵纭畾锛岀壒寰佸悜閲忔瀯閫犲畬鎴愬悗锛岀敤缁熻瀛︿範鏂规硶鎴朙2R鐨勬ā鍨嬭繘琛屾帓搴忋€?br class="mq-83">3.浠?013骞村紑濮嬬殑璇嶅悜閲忕畻娉曪紝瀹冮渶瑕佸厛璁粌璇嶅悜閲忥紝閫氳繃璇嶅悜閲忔瀯閫犱粬浠箣闂寸殑鐩镐技搴︼紝鏈€绠€鍗曠殑涓€绉嶆柟娉曟槸閫氳繃IDF瀵规瘡涓瘝鍚戦噺鍔犳潈锛岀劧鍚庢妸鍔犳潈鍜屽仛涓€涓彞鍚戦噺鐨勮〃绀哄幓璁＄畻鐩镐技搴︺€傝繕鏈変竴浜涙瘮杈冨鏉傜殑鏂规硶锛屾瘮濡俉MD锛岀敤璇嶅悜閲忚绠楃瓑鏂囨湰鐩镐技搴︼紝澶у濡傛灉鏈夊叴瓒ｅ彲浠ョ敤璋锋瓕鎼滅储瀹冧滑鐨勮鏂囧拰瀹炵幇鏂规锛屽畠浠湪鐭枃鏈笂鐨勬晥鏋滆繕鏄潪甯稿ソ鐨勩€?br class="mq-84">4.鍩轰簬绁炵粡缃戠粶灏ゅ叾鏄繁搴﹀涔犳潵鍋氳涔夊尮閰嶃€傚熀浜庢繁搴﹀涔犵殑鍖归厤鏂规鏈変袱绉?
锛?锛夊厛寰楀埌鍙ュ悜閲忚〃绀猴紝鍐嶇敤鍙ュ悜閲忚〃绀烘潵璁＄畻瀹冪殑鍖归厤搴︺€傝繖绉嶆柟娉曚竴鑸噰鐢ㄥ鐢熺綉缁滄垨鑰呭弻濉旀ā鍨嬬綉缁滐紝瀹冪殑鐗圭偣鏄鐞哘鍜孉鐨勬枃鏈殑缃戠粶鏄畬鍏ㄤ竴鏍风殑銆?br class="mq-86">锛?锛夋瀯閫燪A鐨勪氦浜掔綉缁滐紝璁╀粬浠敖鏃╃殑鐩搁亣銆傚敖鏃╃浉閬囧彲浠ュ埄鐢ㄦ洿澶氱殑鍖归厤淇″彿锛岃€屼笉鏄儚鏂规涓€涓殑瀛敓缃戠粶锛屽湪寰楀埌鍙ュ悜閲忎箣鍚庢墠鍘昏绠楀畠鐨勭浉浼煎害锛岃繖鏍峰彲鑳戒細鎹熷け涓€浜涘尮閰嶄俊鎭€傚杞棶绛斿拰鍗曡疆闂瓟杩樻槸鏈夊尯鍒殑锛屽杞棶绛旈渶瑕佽€冭檻涓婁笅鏂囧褰撳墠闂瓟鐨勫奖鍝嶃€傝繖閲屾垜涔熶妇鍑轰簡涓€涓疄渚嬶紝濡傛灉澶у鏈夊叴瓒ｅ彲浠ュ幓鐪嬩竴涓嬨€?/p>
涓婂浘灞曠ず浜嗗洓绉嶆ā鍨嬶細
鈼忓浘涓€鏄緢鍏稿瀷鐨勪竴涓弻濉旀ā鍨嬶紙瀛敓缃戠粶锛夛紝瀹冨氨鏄妸Q鍜孉鍏堝仛浜?invading 锛岀粡杩囦竴涓弻鍚戠殑LSTM鎷垮埌瀹冪殑hiddenfate锛屽父鐢ㄧ殑鏄彇鏈€鍚庝竴涓綔涓哄彞鍚戦噺锛屼絾鏄繖閲屾槸娌跨潃鏃堕棿缁村害鍘诲仛 MaxPooling 锛岃繖鏍峰彲浠ヤ繚鐣欐洿澶氱殑淇℃伅锛屾渶鍚庢妸涓や釜缃戠粶鐨刾ooling 鍊艰繘琛岀浉浼煎害璁＄畻銆傝繖涓绉颁负BasicModel锛屾槸涓€涓潪甯哥粡鍏哥殑瀹炵幇鏂规硶銆?br class="mq-91">鈼忓浘浜屾槸鎶奀N鍜孡STM缁撳悎璧锋潵鐨勪竴绉嶆柟娉曪紝涓嬮潰涓€閮ㄥ垎鍚屾牱鏄妸Q鍜孉鍏堣繃invading 锛岀劧鍚庤繃TSLM鐨勭綉缁滐紝涓婇潰涓€閮ㄥ垎鍥句竴鏄敤pooling 鎶奓STM鐨勬瘡涓€涓猼ime step鍊肩敤pooling 鎻愬彇锛屽浘浜屾槸鐢–N缃戠粶鍘绘彁鍙栬绠楄绠楃浉浼煎害銆?br class="mq-92">鈼忓浘涓夊拰鍥句簩鐨勫尯鍒槸鎶奀N鍜屽弻鍚慙STM鐨勯『搴忓仛浜嗚皟鎹紝鏂囨湰杩囦簡invading 锛屽厛鐢–N鍘绘彁鍙栵紝鍐嶇敤鍙屽悜LSTM鍋氬悜閲忕紪鐮侊紝娌跨潃time step鍋歁AX Pooling锛屾渶鍚庡尮閰嶄袱涓彞鍚戦噺鐨勭浉浼煎害銆?br class="mq-93">鈼忓浘鍥涚浉瀵瑰鏉備竴浜涳紝瀵规瘮鍥句竴鍜屽浘鍥涳紝瀹冧滑鍦ㄥ鐞哘鐨勯€昏緫鏄竴鏍风殑锛岄兘鏄€氳繃invading锛屽弻鍚慙STM锛屾部鐫€time step鍋歁AX Pooling锛涘鐞哸nswer 杩欎竴鍧楃殑鏃跺€欒绋嶅井澶嶆潅涓€浜涳紝瀹冩妸question鐨刾ooling 缁撴灉褰撲綔娉ㄦ剰鍔涗俊鍙凤紝杩欐牱鐢熸垚鐨刟nswer鍙ュ悜閲忎腑鍖呭惈璺焣uestion鐨勫尮閰嶄俊鎭紝濡傛灉鏄尮閰嶇殑锛屽ぇ澶ф彁鍗囦簡浠栦滑涔嬮棿鐨勫尮閰嶆晥鏋溿€?br class="mq-94">杩欑瘒鏂囩珷涓繕鍖呭惈瀵瑰洓绉嶆ā鍨嬬殑鍒嗘瀽锛岃櫧鐒舵ā鍨嬩竴涓瘮涓€涓鏉傦紝浣嗘槸鏁堟灉鏄窡鍏蜂綋鐨勫満鏅浉鍏崇殑銆傛瘮濡傚浘涓€鍦ㄧ煭鏂囨湰涓婇潰鐨勬晥鏋滄渶濂斤紝闅忕潃鏂囨湰闀垮害鐨勫鍔狅紝鍥句簩鍜屽浘鍥涚殑鏁堟灉瑕佹瘮鍥句竴瑕佸ソ涓€浜涳紝鍏朵腑闅忕潃鏂囨湰闀垮害鐨勫鍔狅紝鍥惧洓鐨勬晥鏋滄槸鏈€濂界殑銆傚浘涓夊拰鍥句簩鐨凜N鍜孡STM鐨勯『搴忚皟鎹簡锛屽浘涓夌殑鎵€鏈夋晥鏋滈兘浼氭瘮鍥句簩瑕佸樊涓€浜涳紝鍑虹幇杩欑鎯呭喌鐨勫師鍥犲彲鑳芥槸涓€寮€濮嬪氨鐢↙STM鎻愬彇鐗瑰緛浼氭瘮鐢–N鎻愬彇鑾峰緱鏇村鐨勪俊鎭€傞€氳繃浠ヤ笂鍥涗釜妯″瀷鐨勫垎鏋愶紝澶у鍙互鐪嬪嚭锛屽苟涓嶆槸瓒婂鏉傜殑妯″瀷锛屾晥鏋滆秺濂姐€傛墍浠ュ湪瀹炴垬涓紝澶у鏈夊緢澶氱粏鑺傞渶瑕佹敞鎰忥紝瀵规鎴戜篃鍋氫簡涓€涓嬫€荤粨锛屽洜涓洪兘鏄瘮杈冨父瑙佺殑锛屾墍浠ユ垜杩欓噷灏变笉杩囧鐨勪粙缁嶄簡锛屽ぇ瀹跺彲浠ヨ嚜宸辩湅鍥剧悊瑙ｄ竴涓嬨€?/p>
鍥涳細浠诲姟鍨嬪璇濈郴缁熻儗鍚庣殑绠楁硶
杩欓噷鏈変袱寮犲浘鏄湁涓や釜瀹炰緥锛屼竴涓槸鍗曡疆瀵硅瘽锛屼竴涓槸澶氳疆瀵硅瘽銆傚乏杈圭殑鍗曡疆瀵硅瘽鏄垱寤烘棩绋嬶紝鍙宠竟鐨勫杞璇濇槸璁㈠挅鍟★紝澶у鍙互鎰熷彈涓€涓嬩袱鑰呯殑涓嶅悓銆?br class="mq-102">
鍥句腑鍒楀嚭浜嗕换鍔″瀷瀵硅瘽绯荤粺鐨勫吀鍨嬬郴缁熸灦鏋勩€備粠宸﹀線鍙筹紝鏀跺埌鐢ㄦ埛娑堟伅鍚庯紝渚濇澶勭悊涓猴細
鈼忕涓€涓ā鍧楁槸鑷劧璇█鐞嗚В锛屼篃灏辨槸NLU杩欎釜妯″潡锛岃繖涓ā鍧椾富瑕佽礋璐ｇ殑鏄剰鍥捐瘑鍒拰瀹炰綋鎶藉彇銆傛剰鍥捐瘑鍒氨鏄垎鏋愮敤鎴锋兂瑕佸仛浠€涔堬紝鏄兂瑕佹墦杞︼紝璁㈠挅鍟¤繕鏄彨澶栧崠銆傚疄浣撴娊鍙栧氨鏄瘮濡傛垜瑕佹墦杞︼紝瑕佹娊鍙栧嚭鐢ㄦ埛鐨勫嚭鍙戠偣鍜岀洰鐨勫湴涓や釜妲戒綅銆?br class="mq-107">鈼忕浜屼釜妯″潡State Tracker 鏀跺埌鎰忓浘鍜屾娊鍙栧埌鐨勫疄浣擄紝瀵瑰畠浠繘琛屽～妲芥洿鏂板璇濈姸鎬併€傛洿鏂板畬瀵硅瘽鐘舵€佸悗锛屾垜浠氨浼氱煡閬撳綋鍓嶇敤鎴锋彁渚涗簡鍝簺娑堟伅锛屾垜浠繕闇€瑕佷粈涔堜俊鎭紝濡傛灉淇℃伅涓嶈冻锛屾垜浠渶瑕佸彂鍑烘秷鎭闂紝濡傛灉澶熶簡灏卞彲浠ョ户缁笅涓€姝ャ€?br class="mq-108">鈼廠tate Tracker鎶婄敤鎴风殑瀵硅瘽鐘舵€佷紶閫掔粰绛栫暐妯″潡锛岀瓥鐣ユā鍧楁牴鎹敤鎴峰綋鍓嶇殑瀵硅瘽鐘舵€侊紝鏉ュ垽璇婚噰鍙栦粈涔堟牱鐨勫姩浣滄潵鍥炲鐢ㄦ埛銆?br class="mq-109">鈼忓姩浣滅‘瀹氬悗浼犻€掔粰NLG锛孨LG鎶婇€夊畾鐨勫姩浣滅敓鎴愬搴旂殑鏂囨湰鍙戦€佺粰鐢ㄦ埛銆傚璇濈姸鎬佸弽鏄犱簡鍦ㄤ竴娆″畬鏁寸殑瀵硅瘽鐨勪换涓€鏃跺埢锛岀敤鎴风殑鍚庣画棰勬湡鏄粈涔堬紝涓昏璐熻矗瑙ｅ喅濡備笅闂锛氱敤鎴风殑鏈€杩戜竴鏉℃秷鎭紝鏃跺€欐湁鍙互濉厖妲戒綅鐨勫疄浣擄紝鏈夌殑璇濆氨瑕佸～鍏呫€傝繕闇€瑕佸垽鏂笟鍔￠渶瑕佺殑妲戒綅鏄惁閮藉～鍏呮弧浜嗭紝濡傛灉婊′簡闇€瑕佹彁浜ょ粰绛栫暐缃戠粶鍋欰PI璋冪敤銆傚垽鏂敤鎴锋渶杩戜竴娆′氦浜掔殑瀵硅瘽鍔ㄤ綔鏄湪璇㈤棶淇℃伅杩樻槸鎻愪緵淇℃伅銆侱M瀵硅瘽绠＄悊妯″潡鏈変袱涓柟妗堬細
锛?锛夋柟妗堜竴鏄熀浜庝换鍔″瀷瀵硅瘽鐘舵€佹槸鏈夐檺鐨勫墠鎻愭潵璁捐鐨勶紝渚嬪璁㈡満绁ㄧ殑鍦烘櫙锛屼細鍏堟妸蹇呭～鐨勬Ы浣嶅畾涔夊嚭鏉ワ紝鏍规嵁妲戒綅璁捐鍏蜂綋鐨勯棶棰橈紝鎸夌収棰勮鐨勯『搴忎緷娆″彂缁欑敤鎴锋敹闆嗘Ы浣嶄俊鎭€傛柟妗堜竴鐨勭煭鏉挎槸涓嶄細鏍规嵁鐢ㄦ埛鐨勫洖绛斿幓鐏垫椿鍙橀€氾紝鑰屾槸鎸夌収璁惧畾鐨勬祦绋嬪幓璧帮紝濡傛灉鐢ㄦ埛鍥炵瓟鐨勪笉鏄畠鎯宠鐨勶紝瀹冧篃浼氭妸閿欒鐨勪俊鎭綋鎴愭纭殑淇℃伅锛岃繖鏍峰嚭閿欑殑鍙兘鎬у氨闈炲父澶т簡锛屾墍浠ユ柟妗堜竴鍙兘鐢ㄤ簬闈炲父鏍囧噯鍖栫畝鍗曠殑鍦烘櫙銆?br class="mq-111">锛?锛夋柟妗堜簩鏄熀浜嶧rame锛孎rame鏄敱涓€缁勬Ы浣嶆瀯鎴愶紝鏌愪竴鏃跺埢鐨凢rame鐩稿綋浜庢Ы浣嶇姸鎬佸綋鏃剁殑蹇収銆傚疄鐜版柟寮忓拰鏂规涓€涓€鏍凤紝姣忎竴涓Ы浣嶅叧鑱斾竴涓棶棰橈紝浣嗘槸鑻ョ敤鎴蜂竴娆℃彁渚涘涓Ы浣嶅€硷紝绯荤粺浼氭娊鍙栨墍鏈夌殑妲戒綅鍊煎～鍏咃紝鑰屼笖涓嶄細閲嶅鎻愰棶銆傛柟妗堜簩闇€瑕佸仛鐘舵€佽縼绉诲拰绠＄悊鐨勫伐浣滐紝杩欎篃鏄暣涓璇濈郴缁熸牳蹇冪殑閮ㄥ垎銆傚疄鐜板熀浜嶧rame鐨勬妧鏈柟娉曚篃鏈変袱绉嶏紝绗竴绉嶆槸鍩轰簬瑙勫垯锛屽洜涓虹姸鎬佹槸鏈夐檺鐨勶紝棰勮涓€浜涜鍒欙紝鍦ㄧ姸鎬佷腑闂村仛璺宠浆銆傜浜岀鏄熀浜庢暟鎹┍鍔ㄧ殑缁熻瀛︿範鏂规硶锛屾妸鎵€鏈夌殑妲戒綅鍊硷紝杞寲涓哄悜閲忥紝鍐嶆妸绯荤粺鍙戝嚭鍜屾敹鍒扮殑娑堟伅涔熻浆鍖栦负鍚戦噺锛岃繖鏍峰氨鎶婂洖璇濆綋鍓嶈浆鍖栦负鐗瑰緛鍚戦噺锛岃繖鏍峰氨鍙互寮曞叆椹皬閾捐繃绋嬫垨LSTM鍘诲缓妯★紝鎹曟崏涓婁笅鏂囩殑渚濊禆鍏崇郴銆傚綋鏁版嵁瓒婂锛岀浜岀鐨勬晥鏋滀細瓒婂ソ锛岃€屼笖褰撶涓€绉嶇殑瑙勫垯瓒婂鐨勬椂鍊欙紝鍙戠敓鍐茬獊鐨勬鐜囦細瓒婇珮锛屽湪涓嶅悓鐨勯鍩熻縼绉讳篃瀛樺湪寰堝ぇ鐨勯棶棰樸€?/p>
鐜板湪鎬荤粨涓€涓嬩换鍔″瀷瀵硅瘽绯荤粺鐨勭畻娉曪紝鍒嗗埆涓猴細
1.鎰忓浘璇嗗埆锛屾槸涓€涓枃鏈垎绫讳换鍔★紝闅剧偣鏄杞殑鎰忓浘鍒囨崲锛岄噰鐢ㄥ弻鍚戠殑LSTM+attention鏈哄埗鍋氭枃鏈垎绫讳换鍔★紝瀵规剰鍥捐瘑鍒殑鏁堟灉鏄潪甯稿ソ鐨勩€?br class="mq-114">2.绗簩鏄疄浣撴娊鍙栵紝鏄竴涓吀鍨嬬殑搴忓垪鏍囨敞浠诲姟锛屼笌鍛藉悕瀹炰綋鐨勬ā鍨嬬被浼笺€?br class="mq-115">3.绗笁鏄浠诲姟瀛︿範锛屽皢鎰忓浘璇嗗埆鍜屽疄浣撴娊鍙栧啀涓€娆¤缁冭繃绋嬩腑鍏ㄩ儴瀹屾垚銆?br class="mq-116">4.绗洓鏄璇濈鐞嗭紝瀹冩槸瀵硅瘽绠＄悊绯荤粺鐨勬牳蹇冿紝铏界劧鏈夊緢澶氱殑寤烘ā鏂规硶锛屼絾鏄悇鏈夊埄寮娿€傚叾涓璓OMDP妯″瀷鏄竴涓潪甯哥粡鍏哥殑鏂规硶锛屼絾鏄畠鐨勫伐绋嬪疄鐢ㄦ€т笉楂橈紝涓嶅鏄撳疄鐜般€傜幇鍦ㄦ湁寰堝璁烘枃鍦ㄦ帰绱㈠己鍖栧涔犳満鍒讹紙鍦ㄧ嚎瀛︿範鏈哄埗锛夊绠＄悊绯荤粺鐨勫府鍔╋紝浣嗘槸寮哄寲瀛︿範鏂规硶鐩墠鍙浜庡疄楠岄樁娈碉紝瑕佹槸鎯冲簲鐢ㄤ簬鐜板疄绯荤粺杩樻湁涓€娈电殑璺濈銆?br class="mq-117">5.绗簲鏄洖澶嶇敓鎴愶紝瀹冩湁鍩轰簬妯℃澘鍜屽畬鍏ㄨ嚜鍔ㄧ敓鎴愪袱涓柟寮忋€傚熀浜庢ā鏉垮彲鎺ф€ф瘮杈冮珮锛屽湪鐜板疄绯荤粺涓簲鐢ㄧ殑涔熸瘮杈冨銆傚畬鍏ㄨ嚜鍔ㄧ敓鎴愰€氳繃璇枡鏉ヨ缁冩槸姣旇緝绠€鍗曠殑锛屼絾鏄洜涓烘帶鍒舵潈姣旇緝浣庯紝涓嶇‘瀹氬洜绱犳瘮杈冨锛屾墍浠ユ槸涓€涓秼鍔匡紝鎯宠鍦ㄧ幇瀹炵郴缁熶腑搴旂敤杩樻湁涓€娈电殑璺濈銆?/p>
浜旓細鍒涗笟鍏徃NLP宸ョ▼甯堢殑宸ヤ綔鑱岃矗
鍦ㄥ姪鐞嗘潵涔熺殑绠楁硶鍥㈤槦涓紝NLP宸ョ▼甯堥渶瑕佸伐绋嬪拰绠楁硶閮芥秹鍙婏紝渚嬪鏁版嵁棰勫鐞嗚繖鏄渶鍩烘湰鐨勮姹傦紱鏍规嵁涓氬姟闇€姹傝皟鐮斿苟鍋氱畻娉曢€夊瀷锛涘鐜拌鏂囨ā鍨嬶紝璇勪及鏁堟灉锛屾寔缁紭鍖栵紱寮€鍙戞ā鍨嬬殑鍦ㄧ嚎serving妯″潡锛屾弧瓒虫€ц兘楂樿姹傦紱澶勭悊娴佺▼鍙婇€氱敤宸ュ叿SAAS鍖栵紝淇濊瘉缁忛獙鐨勫鐢ㄣ€?br class="mq-122">濡傛灉NLP宸ョ▼甯堝叿澶囦互涓嬬礌璐ㄤ細鐩稿鎴愰暱鐨勬瘮杈冨揩銆?br class="mq-123">鈼忚绠楁満鍩虹鎵庡疄锛堢紪绋嬭瑷€+鏁版嵁缁撴瀯+鎿嶄綔绯荤粺锛夛紱
鈼忓鏁版嵁鏁忔劅锛屾暟鎹鐞嗗姛搴曟墡瀹烇紱
鈼忔棤闅滅闃呰璁烘枃锛岃兘璁叉竻妤氳鏂囧嚭鍙戠偣鍙婁富瑕佹€濊矾锛?br class="mq-126">鈼忚窡杩涗笟鍔＄浉鍏崇殑棰嗗煙鐮旂┒鎴愭灉锛堣鏂囨垨寮€婧愭柟妗堬級锛?br class="mq-127">鈼忓叧娉ㄧ畻娉曞師鐞嗗拰瀹炵幇缁嗚妭锛岃川閲嶄簬閲忥紱
鈼忓涔犺兘鍔涘己锛岃兘蹇€熶笂鎵嬪疄鎴橈紱
鈼忚嚜涓绘€у己锛岃矗浠诲績寮猴紝鐢ㄦ暟鎹潵鏀拺浣犵殑瑙傜偣銆?/p>
鍏細NLP绠楁硶宸ョ▼甯堥潰璇曟敞鎰忎簨椤?/span>
鍥句腑鐨勭涓€鐐瑰湪浜庣Н绱紝骞虫椂宸ヤ綔涓渶瑕佸澶氬疄鎴樸€傜浜岀偣鍜岀涓夌偣鍙互缁撳悎鏉ョ湅锛屽洜涓烘垜閬囧埌寰堝闈㈣瘯鑰咃紝鑷繁绠€鍘嗕腑鐨勯」鐩竴鐭ュ崐瑙ｏ紝鐤戦棶閬撶粏鑺傚氨鍥炵瓟鐨勭纾曠粖缁婏紝杩欐牱鑲畾鏄緢闅捐揪鍒伴潰璇曡姹傜殑銆傚浜庣鍥涚偣锛屾枃鏈垎绫绘槸姣旇緝缁忓吀鐨勶紝澶ч儴鍒嗘眰鑱岃€呯畝鍘嗛噷闈㈤兘浼氭彁鍒帮紝浣嗘槸瀹冪殑鍘熺悊鍜岀粏鑺傚浣犳槸鍚︾湡鐨勬帉鎻′簡锛屾垜涓婂浘涔熷垪鍑轰簡涓€浜涢拡瀵规枃鏈垎绫诲彲鑳戒細闂埌鐨勯棶棰橈紝澶у鍙互鑷涓€涓嬨€傞拡瀵硅繖浜涢棶棰樻垜浠篃鍙互鍋氫簺鍑嗗锛屽師鐞嗘柟闈㈢殑闇€瑕佽嚜宸卞疄璺靛嵃璞′細姣旇緝娣卞埢锛涚粏鑺傛柟闈㈣鑷繁姊崇悊娓呮锛屾瘡鍋氬畬涓€涓」鐩娓呮鑷繁鐨勫疄楠屾晥鏋滃湪璇ラ鍩熷浜庝粈涔堢瓑绾с€傚浜庝竴涓换鍔★紝濡傛灉浣犱笉浠呯煡閬撹嚜宸辨槸鎬庝箞鍋氱殑锛岃繕浜嗚В鍏朵粬鐨勫疄鐜版柟娉曪紝鏇翠簡瑙ｆ柟娉曚箣闂寸殑鍖哄埆锛屾噦寰楀仛妯悜姣旇緝锛屽湪闈㈣瘯杩囩▼涓偗瀹氬彲浠ョ粰闈㈣瘯瀹樼暀涓嬫繁鍒荤殑鍗拌薄銆?/p>
鍥犱负鐪嬪埌鏈夊緢澶氬ぇ瀛﹀湪鏍＄敓鍜屽垵瀛﹁€呴兘甯屾湜鑳藉浜嗚В涓€浜汵LP锛屾墍浠ヤ笅鍥炬槸鎴戝仛鐨勮祫婧愭帹鑽愬拰鎴愰暱寤鸿鎬荤粨銆傚叾涓祫婧愭帹鑽愮殑鏁欐潗涓浜屾湰鏄叧浜庣缁忕綉缁滃拰NLP鏂瑰悜鐨勶紝寰堜笉閿欑殑涓€鏈功锛岄潪甯稿缓璁ぇ瀹跺幓闃呰涓€涓嬨€?br class="mq-139">鏈€鍚庤繖寮犲浘鏄垜鍑嗗姝ゆLive鎵€浣跨敤鍒扮殑涓€浜涜祫婧愶紝澶у鏈夊叴瓒ｄ篃鍙互鍘讳簡瑙ｄ竴涓嬶紝閲岄潰鏈夊搴旂殑鏂囩珷鍜岃棰戙€?/p>
Q&A:
Q1: NLP宸ョ▼甯堝浣曡€冭檻鍦ㄥ満鏅腑瑕佷笉瑕佷娇鐢ㄦ満鍣ㄥ涔犳ā鍨嬶紵
瑕佷笉瑕佷娇鐢ㄦ満鍣ㄥ涔犳ā鍨嬶紝鏄敱涓氬姟闇€姹傚喅瀹氱殑銆傚綋涓氬姟鍒氬惎鍔ㄧ殑鏃跺€欙紝娌℃湁鏍囨敞鏁版嵁锛屾槸娌℃湁鍔炴硶浣跨敤妯″瀷鐨勩€傝繖涓椂鍊欑敤涓€浜涜鍒欑殑鏂规硶鎶婄郴缁熸惌寤鸿捣鏉ワ紝涓嶆柇鍦扮Н绱鏂欙紝褰撶Н绱埌涓€瀹氱▼搴︼紝涔熸湁浜哄府浣犲仛鏍囨敞锛岄偅浜涜鍒欎笉澶兘婊¤冻闇€姹傜殑鏃跺€欙紝灏卞彲浠ヨ€冭檻浣跨敤浜嗐€?br class="mq-159">
Q2: 鍙ュ悜閲忕幇鍦ㄤ竴鑸€庝箞瀹炵幇锛?/span>
鐜板湪杩樻病鏈変竴涓潪甯稿ソ鐨勬ā鍨嬫垨鑰呮柟娉曞彲浠ヤ繚璇佸彞鍚戦噺鍦ㄦ墍鏈夌殑鍦烘櫙涓嬮兘鍙互淇濇寔涓€涓緢濂界殑琛ㄧず鏁堟灉銆傜涓€绉嶅彲浠ユ牴鎹彞瀛愪腑鐨勬瘡涓€涓瘝鐨勫悜閲忓幓鍋氫竴浜涘钩鍧囥€佸姞鏉冭繍绠楋紝浠庤€岀瓑鍒板畠鐨勫彞鍚戦噺锛屼絾鏄繖绉嶆柟娉曠殑鏁堟灉涓€鑸兘涓嶆槸寰堢悊鎯炽€傜浜岀鏂规硶鏄娇鐢ㄥ叾浠栨ā鍨嬶紝鎶婂彞瀛愪腑鐨勫叧閿瘝鐨勬潈閲嶅姞閲嶏紝闈炲叧閿瘝鐨勬潈閲嶉檷浣庯紝浠庤€屽緱鍒板彞鍚戦噺銆傜涓夌鏂规硶鏄牴鎹鏂欏拰瀹炵幇鐨勪换鍔¤璁′竴涓缁忕綉缁滄娊鍙栧彞鍚戦噺锛岃繖涔熸槸鐩墠鏁堟灉鏈€濂界殑涓€绉嶆柟娉曘€傜鍥涚鏂规硶鏄皢涓€涓鍩熻鏂欎腑寰楀埌鐨勫彞鍚戦噺杩佺Щ鍒板叾浠栭鍩熶娇鐢紝杩欑鏂规硶鐩墠鍦ㄥ疄璺典腑锛屼絾鏄叿浣撶殑鏁堟灉鏄拰鍦烘櫙鐩稿叧鐨勩€?br class="mq-165">
Q3: NLP宸ョ▼甯堥潰璇曞父瑙佺殑棰樼洰鏄粈涔堬紵
杩欎釜闂寰堥毦鏈変竴涓槑纭殑绛旀锛屼竴鑸繕鏄牴鎹畝鍘嗘潵鎻愰棶鐨勩€傛墍浠ヨ闈炲父鐔熸倝鑷繁绠€鍘嗕笂鐨勯」鐩€?/p>
Q4: NLP鍦ㄦ枃鏈嚜鍔ㄧ敓鎴愭柟闈㈢殑鐮旂┒杩涘睍锛?/span>
浠婂勾涓婂崐骞村湪鏈変竴绡?00澶氶〉鐨勭患杩版枃绔狅紝涓撻棬鐩樼偣浜哊LP鏂瑰悜浠ュ墠鍜屽綋鍓嶆瘮杈冨ソ鐨勬妧鏈柟娉曪紝澶у鍙互鑷繁鎼滅储闃呰涓€涓嬨€?/p>
Q5: 璇烽棶鍛藉悕瀹炰綋璇嗗埆涓紝闄や簡NLTK涓殑宸ュ叿鍖咃紝杩樻湁鍒殑宸ュ叿鍖呮垨鑰呮柟娉曚箞锛?/span>
NLTK涓殑宸ュ叿瀵逛腑鏂囩殑鏀寔涓嶆槸寰堝ソ锛屾柉鍧︾鐨凜ALL NLP鏄敮鎸佷腑鏂囩殑锛屼絾鏄畠鏄湪鏂伴椈璇枡涓婅缁冨嚭鏉ョ殑锛屼笉涓€瀹氬悎閫備綘鐨勩€備綘鍙互鑷繁鐢ㄨ嚜宸辩殑璇枡璁粌涓€浠斤紝鎴栬€呭湪Github涓婃壘鐢ㄥ弻鍚慙STM+CRF缁撴瀯璁粌鍑烘潵鐨凬ER妯″瀷銆?/p>
Q6锛氳闂甆LP宸ョ▼甯堥渶瑕佸娣卞害瀛︿範锛屾満鍣ㄥ涔犵殑绠楁硶鏈夋繁鍏ョ殑浜嗚В鍚楋紵鑳藉璋冪敤杩欎簺鏂规硶鍚楋紵
鍏跺疄璋冪敤杩欎簺鍖呯殑璇濓紝鏄В鍐充笉浜嗛棶棰樼殑锛屽洜涓烘湁鏃朵綘浼氶亣鍒版ā鍨嬫晥鏋滃緢宸紝浣嗘槸鍒汉鐢ㄨ繖涓ā鍨嬫晥鏋滄瘮杈冨ソ锛岄偅涓轰粈涔堜綘鐢ㄥ氨涓嶈浜嗗憿锛岃繖涓椂鍊欏氨瑕佹眰浣犲妯″瀷鐨勫師鐞嗘湁涓€瀹氫簡瑙ｏ紝浣犺鍒嗘瀽鍑哄彲鑳藉瓨鍦ㄧ殑闂锛屽彲鑳芥槸鍥犱负浣犳暟鎹煙澶勭悊鐨勪笉澶熷洖锛屽彲鑳芥槸浣犲弬鏁拌皟鐨勪笉澶熷悎閫傦紝濡傛灉浣犱笉浜嗚В锛屽彧鏄綋浣滈粦鐩掓潵鐢紝浣犳槸寰堥毦鍒嗘瀽鍒板叿浣撶殑case鐨勩€?br class="mq-188">
Q7锛氳嚜鐒惰瑷€澶勭悊浠诲姟鍦ㄥ簲鐢ㄦ繁搴﹀涔犳ā鍨嬫椂锛屽湪绾縮erving鏄€庝箞鍋氱殑锛?/span>
鍥犱负鎴戜滑鐢ㄥ埌鐨勬槸TensorFlow妗嗘灦锛屾墍浠ユ垜浠殑serving涔熸槸Tensor serving閭ｄ竴濂楁鏋跺幓鍋氱殑锛屾湁鏃跺€欐垜浠绾胯缁冨畬妯″瀷浠ュ悗锛岃鎶婃ā寮忔枃浠跺鍑烘潵锛岀劧鍚庣敤Tensor serving鍜孴F serving鍘诲姞杞借繖涓ā鍨嬶紝鐒跺悗鐢ㄥ熀浜嶤++鍜孭C杩欏妗嗘灦鍘绘墰绾夸笂鐨勬祦閲忋€?/p>
Q8锛氳闂幇鍦ㄥ仛鎰忓浘璇嗗埆锛岄櫎浜嗕汉宸ユ爣娉紝鏈変粈涔堟繁搴﹀涔犵殑鏂规硶鍙互瀹炵幇鑷姩鏍囨敞涔堬紵
鑷姩瀹炵幇鏍囨敞鐨勬柟娉曚竴鐩撮兘鏈夛紝浣嗘槸鍑嗙‘鏍囨敞涓€鐩存槸涓€涓枒闂紝鐜板湪鎴戜滑鎰忓浘璇嗗埆妯″瀷锛岃〃绀虹敤鍙屽悜LSTM+Tensor杩欐牱鐨勭粨鏋勶紝妯″瀷鏈韩瀛︿範鑳藉姏宸茬粡寰堝己锛屾墍浠ュ緢澶氭椂鍊欏喅瀹氭剰鍥捐瘑鍒噯纭巼灏辨槸浣犺櫄鎷熻鲍绔犳爣娉ㄧ殑鍑嗙‘鎬э紝鎵€浠ュ鏋滀綘鐢ㄨ嚜鍔ㄦ爣鍑嗭紝浼氫娇璐ㄩ噺寰椾笉鍒颁繚璇侊紝浠庤€屾ā鍨嬫晥鏋滃ぇ鎵撴姌鎵ｏ紝鎵€浠ヤ綘闇€姹傚幓鏉冭 銆?/p>
Q9锛歀STM涓ユ牸涓婅搴旇涓嶆槸椹皵鍙か杩囩▼锛岄┈姘忓喅绛栦弗鏍间緷璧栧墠涓€閮ㄥ垎杩囩▼锛岃€孡STM杩囩▼鏄鎵€鏈夊墠闈㈢殑鐘舵€佽繘琛岀紪鐮侊紝杩涜€岄娴嬭緭鍑恒€?/span>
LSTM鍜岄┈灏旂澶繃绋嬬‘瀹炰笉鏄悓涓€鍥炰簨锛屽氨鎴戝垰鎵嶈鐨凬LP瑕佽В鍐崇殑浜斾釜鍩烘湰闂澶ч儴鍒嗛兘鍙互褰掔被鍒拌繖浜斾釜闂涓婏紝浣嗗苟涓嶆槸鎵€鏈夌殑闂閮借兘褰掔被涓婂幓锛岃€屼笖LSTM鍜岄┈灏旂澶繃绋嬩篃涓嶆槸鍚屼竴涓眰娆′笂鐨勬蹇碉紝鑰孡STM鏄疞IN鐨勪竴涓彉绉嶏紝鑰孡IN鏄浠讳竴灞傛涓婄殑搴忓垪杩涜寤烘ā鐨勶紝瀹冩槸涓€涓妧鏈笂鐨勫疄鐜帮紝鑰岄┈灏旂澶繃绋嬫槸姣旇緝鎶借薄鐨勪竴涓蹇碉紝涓€涓槸鎶€鏈笂鐨勶紝涓€涓槸鏁板涓婃瘮杈冩娊璞＄殑姒傚康锛屽苟娌℃湁鍒掔瓑鍙风殑蹇呰鎬с€?/p>
Q10锛氳闂敓鎴愬紡鐨勯棶绛旂郴缁燂紝鎬庝箞閬垮厤瀵瑰悓涓€涓棶棰樼殑鍥炵瓟鍗冪瘒涓€寰嬬殑鎯呭喌锛?/span>
杩欒鐨勬槸搴旇鏄痵equence to sequence妗嗘灦鐨勯棶棰橈紝sequence to sequence鐨勬鏋舵湰韬氨瀛樺湪杩欐牱鐨勯棶棰橈紝鍥犱负閭ｄ簺閫氱敤鐨勫洖澶嶅湪璞珷鍑虹幇鐨勯鐜囦細姣旇緝楂橈紝閽堝杩欎釜闂锛屾湁濂藉嚑绡囪鏂囨槸涓撻棬鏉ヨВ鍐宠繖涓棶棰樼殑锛屾瘮濡傝鍏朵腑涓€涓€濊矾灏辨槸閲嶆柊瀹氫箟鎹熷け鍑芥暟锛屾妸閭ｄ簺棰勬祴浼氬嚭鐜伴珮棰戠巼鐨勫洖澶嶅仛涔樻硶锛岃繖鏍峰畠浼氬€惧悜浜庡鍔犲洖澶嶇殑澶氭牱鎬с€傜劧鍚庡彟澶栦竴涓€濊矾灏辨槸澧炲姞涓€浜涢矞鑹崇殑鐭ヨ瘑杩涘幓锛屾墍璋撻矞鑹崇殑鐭ヨ瘑灏辨槸鏍规嵁鎴戝璇濈殑璇枡锛屾妸鐢ㄦ埛涓婁竴鍙ヨ瘽鐨勪富棰樿瘝鎶藉彇鍑烘潵锛岀劧鍚庡湪鐢╠ecoding鐨勬椂鍊欙紝鐢ㄤ竴浜涙柟娉曟妸涓婚璇嶈瀺鍏ュ埌鎴戠殑瑙ｇ爜杩囩▼褰撲腑锛岃繖鏍风浉褰撲簬鎶婇矞鑹崇殑鐭ヨ瘑鍔犺繘鍘讳互鍚庯紝灏变細鍦ㄤ富棰樿瘝闄勮繎鍋氳В鐮侊紝杩欐牱灏变竴瀹氱▼搴︿笂浼氶伩鍏嶅洖澶嶅嚭鐜板崈绡囦竴寰嬬殑鎯呭喌锛屾垨鑰呰窡鎴戞兂瑕佽〃杈剧殑鎰忔€濆樊鍒緢澶с€?/p>
涓嶆柇鏇存柊璧勬簮
娣卞害瀛︿範銆佹満鍣ㄥ涔犮€佹暟鎹垎鏋愩€乸ython
MINITAB缁熻鍒嗘瀽鏂规硶鍙婂簲鐢紙绗?鐗堬級
以上是关于NLP 绠楁硶宸ョ▼甯堢殑瀛︿範銆佹垚闀垮拰瀹炴垬缁忛獙的主要内容，如果未能解决你的问题，请参考以下文章