抓取百万知乎用户设计之实体设计

Posted 王起帆

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了抓取百万知乎用户设计之实体设计相关的知识,希望对你有一定的参考价值。

             点击我前往Github查看源代码 

本项目github地址:https://github.com/wangqifan/ZhiHu

一.实体的关系

实体是根据返回的Json数据来设计的

教育经历方面

 

用户可以有很多教育经理,USER和education是一对多的关系,一个education对应一个education

一个用户可以有多个工作,当然很多人可以从事同一份工作,每份工作对应一家公司,对应一个岗位

每个用户可以有多个居住地,同一个居住地有多个用户,每个用户有一个行业,同一个行业有多个用户      

                                          
代码实现就不列举了,创建一个Model类库项目

二.数据库上下文

 public class ZhihuEntity : DbContext
    {
        public ZhihuEntity()
            : base("name=ZhihuEntity")
        {
          //  Database.SetInitializer<ZhihuEntity>(null);
        }
     
        public DbSet<User> user { get; set; }
        public DbSet<business> business { get; set; }
        public DbSet<employments> employments { get; set; }
        public DbSet<company> company { get; set; }
        public DbSet<job> job { get; set; }
        public DbSet<locations> locations { get; set; }
        public DbSet<educations> educations { get; set; }
        public DbSet<school> school { get; set; }
        public DbSet<major> major { get; set; }
        public DbSet<UserTemp> UserTemp { get; set; }
        public DbSet<nexturl> nexturl { get; set; }

    }

 

 Note:nexturl和UserTemp是用来存贮临时数据的

修改好配置文件即可使用了

 

以上是关于抓取百万知乎用户设计之实体设计的主要内容,如果未能解决你的问题,请参考以下文章

抓取百万知乎用户数据之爬取思路

我用Java+Redis+ES+Kibana技术对数百万知乎用户进行了数据分析,得到了这些...

用Java+Redis+ES+Kibana技术对数百万知乎用户进行了数据分析,得到了这些...

我用Java+SeimiCrawler+Redis+ES+Kibana技术对数百万知乎用户进行了数据分析,得到了这些...

千万知乎用户数据分析报告

爬取知乎百万用户信息之总结篇