数据分析杂谈

数据分析杂谈

互联网|大数据|物联网|机器学习

文章 阅读 7
数据分析杂谈
数据分析杂谈

solr数据导入的几种方式

solr数据导入,经过这几天的查资料,我觉得solr数据导入可以有三种方式: 1、编写数据xml文件,通过post.jar导入;2、通过DIH导入;3、利用solrj导入数据;
文章 阅读 22
文章 阅读 9
文章 阅读 10
数据分析杂谈
数据分析杂谈

MySQL冗余数据的三种方案

一,为什么要冗余数据 互联网数据量很大的业务场景,往往数据库需要进行水平切分来降低单库数据量。T(buyer_id, seller_id, oid);如何实施数据的冗余,是今天将要讨论的内容。
文章 阅读 11
文章 阅读 6
数据分析杂谈
数据分析杂谈

Activiti的流程如何与外部业务进行数据交互

步骤四 若我们需要在供应商管理模块中,点添加的时候,就可以实现启动供应商审批流程,这时我们需要做一点配置。在全局的模块流程绑定模块中,配置供应商模块中的流程,同时在供应商添加管理模块中,调用这个配置处理。} });
文章 阅读 14
文章 阅读 6
文章 阅读 9
数据分析杂谈
数据分析杂谈

关于数据采集的配置方法

乐思网络信息采集系统 火车采集器 八爪鱼采集器 熊猫采集软件 狂人采集器 网络神采 蓝蜘蛛互联网采集系统 以上本人研究过采集器,没人更适合的,应该说各有所长吧。关于数据采集的配置方法
文章 阅读 28
数据分析杂谈
数据分析杂谈

ElasticSearch大批量数据入库

最近着手处理大批量数据的任务。现状是这样的,一个数据采集程序承载大批量数据的存储和检索。后期可能需要对大批量数据进行统计。针对上述情况需要对目前的储存结构进行优化。后来引入elasticsearch来对大数据检索进行优化。
文章 阅读 9
文章 阅读 7
文章 阅读 11
文章 阅读 5
文章 阅读 6
数据分析杂谈
数据分析杂谈

 数据传输对象(DTO)

数据传输对象(DTO),是一种设计模式之间传输数据的软件应用系统。数据传输目标往往是结合使用的数据访问对象从数据库中检索数据。数据传输对象与数据交互对象或数据访问对象之间的差异是一个以不具有任何行为除了存储和检索的数据(访问和存取器)。
文章 阅读 13
数据分析杂谈
数据分析杂谈

数据库水平切分的基本原理

通过集群方案,解决了数据库宕机带来的单点数据库不能访问的问题;答案是:Sharding。这样一来,文章数据就很自然的被分到了各个数据库中,达到了数据切分的目的。为什么还需要数据切片呢?答案也是Sharding,也就是我们所说的数据切分方案。
文章 阅读 11
文章 阅读 8
数据分析杂谈
数据分析杂谈

Struts Action 用Map来封装数据

当表单中数据会增加的时候,在form中写每一个属性不利于软件的升级和维护,这个时候我们有两种解决方案,一种是采用DynaActionForm,另一种就是采用Map属性
文章 阅读 22