-
数据处理---Spring Batch之实践
所属栏目:[大数据] 日期:2021-02-27 热度:157
副标题#e# 上面介绍了Spring Batch的基本概念和简单的demo项目,显然这些还是不够实际使用的。下面我们来更多的代码实践。 ? ? ? ? 在上面的基础项目上面,我们来更多的修改: ? ? ? ? 不用项目默认的hsql DB,用mysql,让ItemReader,ItemWriter 支持mysql;[详细]
-
Pentaho BI Server的启动过程详解(二)
所属栏目:[大数据] 日期:2021-02-27 热度:90
时隔好久现在接着上一篇来继续聊一下Pentaho BI Server的启动过程,今天主要讲的就一个类PentahoSystem。 软件版本 Pentaho BIServer 5.0.1-ce 关于PentahoSystem 在上一篇文章里已经介绍过在SolutionContextListener中当应用启动时分调用PentahoSystem的i[详细]
-
【最强干货】关于文本挖掘的资料(文献,报告,策略,代码)
所属栏目:[大数据] 日期:2021-02-27 热度:197
副标题#e# 查看之前文章请点击右上角 ,关注并且 查看历史消息 所有文章全部分类和整理 ,让您更方便查找阅读。请在页面菜单里查找。 今天没有策略研究推送。 有几篇文章还需再研究一下 好久没有给大家干货啦 今天给大家一些干货福利 文本挖掘方面的资料 文[详细]
-
暴力:大数加法
所属栏目:[大数据] 日期:2021-02-27 热度:58
Description The I-number of x is defined to be an integer y,which satisfied the the conditions below: 1. yx; 2. the sum of each digit of y(under base 10) is the multiple of 10; 3. among all integers that satisfy the two conditions above,[详细]
-
数据处理---Spring Batch之进阶
所属栏目:[大数据] 日期:2021-02-27 热度:112
有了前面两篇的基础之后,我们一起来聊聊更高级的关于Spring Batch的话题。比如Job 配置;自定义各种Listener;控制步骤流程;自定义Reader,Processor,Writer;并行处理。这些东西在Spring Batch的使用中很多可能会需要的,当然还有更多的内容,最好找下文[详细]
-
什么是BI ? 哪些行业需要用到BI?
所属栏目:[大数据] 日期:2021-02-27 热度:140
什么是BI?哪些行业需要用到BI? BI——就是分析利用企业已有的各种商用数据来了解企业的经营状况和外部环境,从而为企业的经营决策提供数据支撑。 下面我们来详细分解下: 企业应用BI的目标即是期望通过对来自不同的数据源进行统一处理及管理,把数据变成[详细]
-
[每月好书] 写给大家看的算法书(来自漫画帝国的图解算法书:轻
所属栏目:[大数据] 日期:2021-02-27 热度:55
副标题#e# 和老规矩一样,本月月考的奖品就是《写给大家看的算法书》两本。不知道什么是月考的同学,请补习下面文章: 每月送书活动来袭,免费哦! 另外,为了避免每次月考都是相同的同学获得最高奖,从上次月考开始,获得过最高奖(得到过书)的同学,将不能[详细]
-
斯特林大数公式求阶乘位数
所属栏目:[大数据] 日期:2021-02-27 热度:128
? 题目链接: ? ? ? ? ? ? ? FZU: ? ?-?Link?- ? ? ? ? ? ? ? NYOJ ? ? ??? ? ?无意在FZU上看到这道题,以前在NYOJ上做过不过又忘了怎么做了; ? ?网上找找才记起来这个斯特林大数公式;log(n!)=log10(sqrt(2*pi*n))+n*log10(n/e)+1; ? ? ? ? ? ? ? ? ? ?[详细]
-
同义词挖掘
所属栏目:[大数据] 日期:2021-02-26 热度:183
词典百科词条 1:规则提取数据,对于一些别名,或者关键词括弧类的数据,或者简称等. 2.提取简要关键词,计算夹角余弦. 上下文相关性挖掘(需要人工审核) 在所有的文档中,如果两个term经常在相同的上下文下出现,那么这两个词是同义词的可能性较大。基于这个假[详细]
-
电商卷皮BI的实践演进和架构体系—猫友会大讲坛第4期
所属栏目:[大数据] 日期:2021-02-26 热度:64
副标题#e# 大家好,我是卷皮BI团队负责人柴楹,今天在这里给大家分享一下卷皮的BI和大数据的一些东西。 BI大数据是什么? 首先我们来聊一下BI和大数据。BI和大数据到底有什么关系和不同。 BI主要有三方面的技术,包括 DW,OLAP,DM。目标就是提高企业经营和[详细]
-
图解机顶盒数据处理流程
所属栏目:[大数据] 日期:2021-02-25 热度:175
1. 前端数据的打包、调制 与 广播 前端系统负责将电视节目的音视频数据,数字电视业务信息的各种表 按照 数字电视业务信息规范,打包成 ts 流,然后进行调制,再通过cable线,卫星,地面直播信号塔这些物理信道进行广播。 两层复用:多个电视节目通过? 时[详细]
-
深度解析 Twitter Heron 大数据实时分析系统
所属栏目:[大数据] 日期:2021-02-25 热度:67
2015年6月1号, Twitter 对外宣讲了他们的Heron系统, 从ppt和论文中,看起来完爆storm。昨天,抽空把论文,仔细读了一遍, 把个人笔记和心得分享一下: 摘要: Heron更适合超大规模的机器, 超过1000台机器以上的集群。 在稳定性上有更优异的表现, 在性[详细]
-
81个开源大数据处理工具汇总(下),包括日志收集系统/集群管理/
所属栏目:[大数据] 日期:2021-02-24 热度:142
副标题#e# 上一部分:http://my.oschina.net/u/2391658/blog/711016 第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。 ? 日志收集系统 一、Facebook?Scribe 贡[详细]
-
81个开源大数据处理工具汇总(上),包括查询引擎/流式计算/存储
所属栏目:[大数据] 日期:2021-02-24 热度:161
副标题#e# 本文一共分为上下两部分。我们将针对大数据开源工具不同的用处来进行分类,并且附上了官网和部分下载链接,希望能给做大数据的朋友做个参考。下面是第一部分。 查询引擎 一、Phoenix 贡献者::Salesforce 简介:这是一个Java中间层,可以让开发[详细]
-
文本挖掘的基本流程
所属栏目:[大数据] 日期:2021-02-24 热度:118
副标题#e# 一、获取文本 ??我们获取网络文本,主要是获取网页HTML的形式。我们要把网络中的文本获取文本数据库(数据集)。编写爬虫(Spider)程序,抓取到网络中的信息。可以用广度优先和深度优先;根据用户的需求,爬虫可以有垂直爬虫和通用爬虫之分,垂直爬[详细]
-
Mondrian 4 测试的简单demo(Saiku简单测试Schema文件)
所属栏目:[大数据] 日期:2021-02-24 热度:178
##?整理此文章方便大家做测试(手写Mondrian?Schema自测),不必每次都向saiku上传文件了 ##?关键文件 *?foodmart4.xml??测试对应的schema文件 *?foodmart-sql.zip????测试对应的数据库脚本 maven项目: pom文件 foodmart4.xml文件 简单java代码测试: 返[详细]
-
EMC存储上的大数据 – 大数据分析实施路线
所属栏目:[大数据] 日期:2021-02-24 热度:64
副标题#e# ? ? ?企业一直在处理快速增长的数据量(也称为大数据)的存储和管理问题。本文为系列的第十篇,介绍了发现适当的大数据业务机会并制定利用该机会的全面路线图。 ? ???? 大数据时代,各公司都在努力挖掘有关他们业务的令人信服的见解,以赢得竞争[详细]
-
O2O产品质量保障体系(四)| 基于学习的线下商户质量挖掘
所属栏目:[大数据] 日期:2021-02-24 热度:144
副标题#e# 一、线下商户问题迫在眉睫 糯米不仅仅是团购,它是O2O的生活服务平台,糯米的产品质量可以定义为线上和线下,线上主要是在线商品的售卖情况,所对应的质量问题也就是商品类的badcase,这些会直接影响我们的流水。而线下主要是商家服务的接待质量[详细]
-
倒计时24小时开课|StuQ大数据分析平台小班课(仅剩10个名额)
所属栏目:[大数据] 日期:2021-02-24 热度:121
副标题#e# StuQ?联合三位大数据资深专家桑文锋、曹犟、付力力共同推出《从0到1构建大数据分析平台》精品小班教学,仅有 60 席位,精品小班课区别于大众在线视频教学,课程设置具有如下特色: 采用在线视频直播授课 以实战为主 在线解答疑问 课后作业review[详细]
-
简化版大数乘法
所属栏目:[大数据] 日期:2021-02-24 热度:84
Description Dear Uncle Jack is willing to give away some of his collectable CDs to his nephews. Among the titles you can find very rare albums of Hard Rock,Classical Music,Reggae and much more; each title is considered to be unique. Last[详细]
-
【ZJOI2013amp;amp;BZOJ3110】K大数查询
所属栏目:[大数据] 日期:2021-02-24 热度:148
Description 有n 个位置和m 个操作。操作有两种,每次操作如果是1 a b c 的形式,表示往第a 个位置到第b 个位置每个位置加入一个数c。如果操作形如2 a b c 的形式,表示询问从第a 个位置到第b 个位置,第c 大的数是多少。 Solution 树套树的模板题 找矩阵[详细]
-
大数据处理平滑算法:Good-Turing估计
所属栏目:[大数据] 日期:2021-02-24 热度:77
大数据处理中,不管数据如何大,由于不能穷举一切,总是有限的。那么在有限的数据规模下,参数平滑算法就十分重要。参数平滑算法是在训练数据不足时,采用某种方式对统计结果和概率估计进行必要的调整和修补,以降低由于数据稀疏现象带来的统计误差。 比如[详细]
-
搞得定基因组分析的TB级数据处理,跑的赢摩尔定律的发展边际,劲
所属栏目:[大数据] 日期:2021-02-23 热度:95
↓↓↓[详细]
-
手把手教你从0到1构建大数据分析平台(仅剩18个名额)
所属栏目:[大数据] 日期:2021-02-23 热度:170
副标题#e# StuQ?联合三位大数据资深专家桑文锋、曹犟、付力力共同推出《从0到1构建大数据分析平台》精品小班教学,仅有 60 席位,精品小班课区别于大众在线视频教学,课程设置具有如下特色: 采用在线视频直播授课 以实战为主 在线解答疑问 课后作业review[详细]
-
【企业推荐】蚁坊软件-专业从事互联网大数据分析
所属栏目:[大数据] 日期:2021-02-23 热度:104
副标题#e# 大 数 据 人 报道DT时代应用资讯及动态,爆料剖析行业热点新闻 本文系蚁坊软件投稿于大数据人发布。欢迎更多优质原创文章投稿给大数据人:289585305@qq.com 湖南蚁坊软件有限公司 一、公司介绍 1、公司简介 湖南蚁坊软件有限公司成立于2010年8月[详细]