目前nodejs都有啥框架呢？哪个最好

Posted 2023-04-07

对于开发者来最好的15个Node.JS框架：
Kiss
Kiss.js使用Django风格的模板。通过项目你可以看到，客户端的coffee scripts脚本在刚开始时会被加载。样式使用Stylus。
Sails
Sails 很容易]创建自定义的，企业级的Node.js应用。它被设计成你熟悉的类似Ruby on Rails的MVC框架，但是又可以满足现代应用的需要： 可扩展的数据驱动接口，面向服务的架构。它特别擅长设计图表，时时表单，或多人游戏，你可以在任何项目中使用。
Total
Total.js是另外一旧助你创建Node.js，Web页面/应用的好框架，同样支持MVC架构。它是一旧使用html,javascript和CSS创建的现代框架。

Partial
Partial.js又一个 Node.JS框架，开发者使用HTML,CSS和JavaScript可以创建大型的Web站点和应用。功能和架构类似于total.js
Flatiron
Flatiron.js同样也是一旧现代的下一代的web框架，帮助开发者创建惊艳的web应用和功能。

Socket Stream
Socket Stream是被来设计时时响应的单页面程序，基于快速的棋模块化r 特性。

Socket.io
Socket.io是基于node.js的实时框架，支持HTML的WebSocket和跨浏览器的向后监察。

Dozer
Dozer是一款极快r 支持前端应用的系统。它不是一个框架，不是一个工具包。Dozer的设计原则是为前端提供RESTful API的接口支持。
Coke
COKE是一个轻量级的MVC框架。它非常简单，模块化的，非常快。

Express.io
Express.io是一组实时的基于node.js的web开发框架，支持MVC构架创建Web应用。

Opa
Ops是g 个JavaScript的框架－快速的加密的Web开发。

Spine
现代的MVC模式，完全支持现代JavaScrip应用。

Mean
MEAN是一款优化后的全栈javascript node.js框架，将简化和加速你的web应用开发。

Sleek
一步就叫座创建快速的，灵活的，友好的web程序。

Stapes
Stapes.js假设你的流程和风格是未知r 。
kraken
Kraken是一个安全的可扩展的框架，可以帮助你更好组织你的架构。他们的模块都可以独立使用。

Derby
Web webjs将你的服务器端脚本变得更简单，更稳定，可读性晚好。
Geddy.
WINTERSMITH
基于node.js的快速的极小的，多平台支持的站点生成器。 参考技术A 建议了解一下CabloyJS开源NodeJS全栈框架，可以开发全场景业务。前端基于Vue+Framework7，后端基于KoaJS+EggJS
1、定位
CabloyJS是面向中小开发团队和接单侠开发的NodeJS全栈业务快速开发框架，支持全场景业务开发，省时、省力
2、中小开发团队或接单侠所面临的困境
1）多场景需求：PC、android、ios、微信、钉钉，等等
2）多种要素平衡：技术、人才、时间、质量 -> 成本、收益
客户的潜在需求日益多变，因此开发场景日益碎片化，不同的场景又面临着不同的技术选择，从而又决定着人员的配备，技术选择与人员配置影响着项目开发的时间与质量，从而又最终体现在成本与收益的平衡上
3、CabloyJS应对之法
1）采用pc = mobile + pad的独特页面风格，把移动端的开发体验与用户操控体验带入pc端，一套代码适应全场景需求
2）CabloyJS不仅是技术框架，更是业务框架，将用户管理、角色管理、权限管理等诸多功能特性沉淀成核心模块，从而为快速业务开发提供强有力的支撑
3）彻底的前后端分离体系，从而实现前端灵活多变，后端不变应万变，使整个CabloyJS架构具有很强的灵活性和延展性
4、相关资料的链接
1）GitHub源码： https://github.com/zhennann/cabloy
2）网易免费课程： https://study.163.com/course/courseMain.htm?courseId=1209403891
下面的几个网站也是用CabloyJS开发的：
1）官网（技术文档）：https://cabloy.com/zh-cn/
2）社区（论坛）： https://community.cabloy.com/zh-cn/index.html
3）博客： https://zhennann.com/
4）商店：https://store.cabloy.com

Python都有哪些常见的，好用的爬虫框架

目前实现爬虫技术的编程环境有很多种，Java、Python、C++等都可以用来写爬虫。但很多人选择Python来写爬虫，原因是Python确实很适合做爬虫，丰富的第三方库十分强大，简单几行代码便可实现你想要的功能。更重要的，Python也是数据挖掘和分析的好能手。那么，今天IPIDEA就带大家来了解Python爬虫一般用什么框架比较好。

 

 

Beautiful Soup：整合了一些常用爬虫需求。它是一个可以从HTML或XML文件中提取数据的Python库。它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的式.Beautiful Soup会帮你节省数小时甚至数天的工作时间。Beautiful Soup的缺点是不能加载JS。

 

selenium：这是一个调用浏览器的driver，通过这个库你可以直接调用浏览器完成某些操作，比如输入验证码。Selenium是自动化测试工具，它支持各种浏览器，包括 Chrome，Safari，Firefox等主流界面式浏览器，如果在这些浏览器里面安装一个 Selenium 的插件，可以方便地实现Web界面的测试. Selenium支持浏览器驱动。Selenium支持多种语言开发，比如 Java，C，Ruby等等，PhantomJS 用来渲染解析JS，Selenium 用来驱动以及与Python的对接，Python进行后期的处理。

 

Scrapy：Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。它是很强大的爬虫框架，可以满足简单的页面爬取，比如可以明确获知url pattern的情况。用这个框架可以轻松爬下来如亚马逊商品信息之类的数据。但是对于稍微复杂一点的页面，如weibo的页面信息，这个框架就满足不了需求了。它的特性有：HTML, XML源数据 选择及提取 的内置支持；提供了一系列在spider之间共享的可复用的过滤器(即 Item Loaders)，对智能处理爬取数据提供了内置支持。

 

Portia：是一个开源可视化爬虫工具，可让使用者在不需要任何编程知识的情况下爬取网站！简单地注释自己感兴趣的页面，Portia将创建一个蜘蛛来从类似的页面提取数据。简单来讲，它是基于scrapy内核；可视化爬取内容，不需要任何开发专业知识；动态匹配相同模板的内容。

 

cola：是一个分布式的爬虫框架，对于用户来说，只需编写几个特定的函数，而无需关注分布式运行的细节。任务会自动分配到多台机器上，整个过程对用户是透明的。项目整体设计有点糟，模块间耦合度较高。

 

PySpider：一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写，分布式架构，支持多种数据库后端，强大的WebUI支持脚本编辑器，任务监视器，项目管理器以及结果查看器。Python脚本控制，可以用任何你喜欢的html解析包。

参考技术A 由于项目需求收集并使用过一些爬虫相关库，做过一些对比分析。以下是我接触过的一些库：

Beautiful Soup。名气大，整合了一些常用爬虫需求。缺点：不能加载JS。
Scrapy。看起来很强大的爬虫框架，可以满足简单的页面爬取（比如可以明确获知url pattern的情况）。用这个框架可以轻松爬下来如亚马逊商品信息之类的数据。但是对于稍微复杂一点的页面，如weibo的页面信息，这个框架就满足不了需求了。
mechanize。优点：可以加载JS。缺点：文档严重缺失。不过通过官方的example以及人肉尝试的方法，还是勉强能用的。
selenium。这是一个调用浏览器的driver，通过这个库你可以直接调用浏览器完成某些操作，比如输入验证码。
cola。一个分布式爬虫框架。项目整体设计有点糟，模块间耦合度较高，不过值得借鉴。

以下是我的一些实践经验：

对于简单的需求，比如有固定pattern的信息，怎么搞都是可以的。
对于较为复杂的需求，比如爬取动态页面、涉及状态转换、涉及反爬虫机制、涉及高并发，这种情况下是很难找到一个契合需求的库的，很多东西只能自己写。

至于题主提到的：
还有，采用现有的Python爬虫框架，相比与直接使用内置库，优势在哪？因为Python本身写爬虫已经很简单了。
third party library可以做到built-in library做不到或者做起来很困难的事情，仅此而已。还有就是，爬虫简不简单，完全取决于需求，跟Python是没什么关系的。本回答被提问者采纳 参考技术B ①Scrapy：是一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中;用这个框架可以轻松爬下来如亚马逊商品信息之类的数据。
②PySpider：是一个用python实现的功能强大的网络爬虫系统，能在浏览器界面上进行脚本的编写，功能的调度和爬取结果的实时查看，后端使用常用的数据库进行爬取结果的存储，还能定时设置任务与任务优先级等。
③Crawley：可以高速爬取对应网站的内容，支持关系和非关系数据库，数据可以导出为JSON、XML等。
④Portia：是一个开源可视化爬虫工具，可让您在不需要任何编程知识的情况下爬取网站，简单地注释您感兴趣的页面，Portia将创建一个蜘蛛来从类似的页面提取数据。
⑤Newspaper：可以用来提取新闻、文章和内容分析，使用多线程，支持10多种语言等。
⑥Beautiful Soup：是一个可以从HTML或XML文件中提取数据的python库，它能够通过你喜欢的转换器实现惯用的文档导航、查找、修改文档的方式，会帮你节省数小时甚至数天的工作时间。