自然语言处理的思考

Posted 2022-06-06 rise0111

人工智能时代的自然语言处理

自然语言处理有50年的历史，比人工智能还要早，今天的主题是在当前的大背景下怎么去做自然语言处理。
我们知道人类是从农业社会进入到工业社会然后现在进入到信息社会，我们在想下一个社会是什么？其实我也想不通，我们谈信息社会，刚开始没有人讲数据，很多人讲信息，讲完信息后有人讲知识经济，讲完知识经济后有人又讲大数据，云计算，又讲数字化生存，然后现在又开始讲智能，我就在想，这些术语在人类社会在不同的时期出现，那他们之间到底有什么逻辑关系，我自己总结了一下，我也在网上搜了一下，第一个从社会的角度，从农业到工业再到信息，将信息社会进行细分， 大概分几个部分，第一个叫数据，第二个叫信息，第三个叫知识，第四个叫智能，那大家想一想什么叫数据，如果说你做过大数据，做过自然语言处理，请你想一想什么叫数据，什么叫智能，什么叫智能，一句话能讲清楚吗？所以说这个很关键，我可以告诉大家，什么叫数据呢？数据就是按照一定约定俗称的格式对事物属性的一个描述，这就叫数据,比如说杭州今天天气多少度？这就叫数据，那信息是什么呢？我们有这么多数据，这数据有没有信息呢？有，但是数据本身不是信息，数据知识一些数据而已，英文角度叫data，从计算机角度来说就是0和1，那就是数据，信息是什么呢？信息是从数据中抽象出来的具有时间性的，具有语义的，具有一定逻辑关系的这些数据，举个栗子，我们说在二楼开会，这句话是没有信息的，因为它是不确定的，什么时候在三楼开会，在三楼开什么会？杭州天气20度这句话只是数据，没有信息，应该说今天杭州的天气20度才叫信息，那什么叫知识呢？知识是从信息里进一步抽象的，知识就是说从信息里面沉淀下来的，和原有的知识体系结构能够融合起来的我们把它叫做知识，比如说杭州今天20度，过了一段时间杭州温度3度，我们说杭州一年有春夏秋冬，这就叫做知识，有了知识后，那什么叫做智能呢？我们说一个人很有知识很有文化，但是情商很差，或者说解决问题的能力很差,智能是什么呢？利用知识解决问题的能力就叫做智能，智能这两个字分开讲叫智慧和能力，智慧很大一部分是从知识上来的，有了知识之后你怎么去解决问题才叫做智能，所以说在人工智能时代，我们要用计算机达到人具有的解决问题的水平。
然后接着想，大家都说动物没有智能，只有人才有智能，人是在我们目前的认知范围内，在宇宙当中，唯一的具有智能的生物体，所以问题来了，什么叫智能，为什么人才有智能，