处理固定数据表中的大量数据

Posted

技术标签:

【中文标题】处理固定数据表中的大量数据【英文标题】:Handling huge amount of data in Fixed Data Tables 【发布时间】:2017-05-24 12:05:17 【问题描述】:

我正在尝试在我的 Web 应用程序中使用固定数据表,我正在处理大量数据,例如数十万条记录。我正在尝试一次加载所有数据,以充分利用数据表的搜索和排序功能。

Here 是我正在使用的数据表的链接。

加载数据会花费大量时间,这是意料之中的,但加载数据后浏览器出现一些故障,我的意思是它卡住了。

如何处理功能齐全的数据表中的海量数据?

【问题讨论】:

对数据表实现服务器端分页、排序、过滤等以提高性能 我打算只在服务器端处理,但同时我想知道有没有更好的选择...... @Jaromanda 很抱歉这是“数十万数据”。 没有代码?但我建议使用 vanilla javascript 而不是用于加载/渲染数十万条记录的库。 “我打算只在服务器端处理,但同时我想知道有没有更好的选择”没有。跨度> 【参考方案1】:

使用固定数据表的主要优点是可以基于数组或对象渲染整个表。

固定数据表的官方链接在:

http://schrodinger.github.io/fixed-data-table-2/example-object-data.html

以下链接包含基于 JSON 数据呈现表格。正如您提到的,您拥有的数据非常庞大,还可以添加一些附加功能,例如客户端排序和过滤。

【讨论】:

以上是关于处理固定数据表中的大量数据的主要内容,如果未能解决你的问题,请参考以下文章

使用AWS步骤函数处理大量数据?

机器学习数据预处理之缺失值:固定值填充

如何为 Web 统计模块处理大量数据

如何处理 MySQL 数据库中的大量数据?

如何处理存储在数据库中的大量文档?

处理大量日志/事务