-
WindowsXP SP3 AFD.sys 本地拒绝服务漏洞的挖掘过程
所属栏目:[大数据] 日期:2021-03-07 热度:91
标 题: WindowsXP SP3 AFD.sys 本地拒绝服务漏洞的挖掘过程 时 间: 2013-03-17,15:22:33 这是本人第一次做漏洞挖掘,2月的时候开始研究漏洞挖掘技术,2月24号那天在进行Fuzz测试的时候偶然的发现了一个afd.sys未处理的异常,然后就对这个异常如获至宝的分[详细]
-
520我与大数据有个约会——上海大数据创新应用论坛完美落幕
所属栏目:[大数据] 日期:2021-03-07 热度:179
副标题#e# 2016年5月20日周五下午,由上海市大数据联盟牵头,慧与(中国)有限公司、联通小沃科技与华院数据共同承办,来自金融服务业、运营商、零售及电商、制造等行业的大数据应用先行者们为各行各业170余位来宾们打开了一扇通向大数据应用落地彼岸的智慧之[详细]
-
基因数据处理33之Avocado运行记录(参考基因组)
所属栏目:[大数据] 日期:2021-03-07 热度:200
1.数据下载: avocaodo的test resource中 2.预处理: cat Homo_sapiens_assembly19.fasta | grep -i -n '' Homo_sapiens_assembly19Head.txt cat Homo_sapiens_assembly19Head.txt cat Homo_sapiens_assembly19.fasta | head -34770016 |tail -787820 Homo[详细]
-
推荐 | 9个最佳的大数据处理编程语言
所属栏目:[大数据] 日期:2021-03-07 热度:134
副标题#e# 大数据的浪潮仍在继续。它渗透到了几乎所有的行业,信息像洪水一样地席卷企业,使得软件越发庞然大物,比如Excel看上去就变得越来越笨拙。数据处理不再无足轻重,并且对精密分析和强大又实时处理的需要变得前所未有的巨大。 那么,在巨大的数据集[详细]
-
基因数据处理36之qc-metrics安装
所属栏目:[大数据] 日期:2021-03-07 热度:63
副标题#e# 更多代码请见:https://github.com/xubo245/SparkLearning Spark中组件Mllib的学习之基础概念篇 1解释 Read and variant metrics,useable for pipeline quality control purposes qc-metrics主要是用于read和变异的度量,流水线质量控制的目的 2.[详细]
-
基因数据处理34之使用samtools和bcftools进行变异分析
所属栏目:[大数据] 日期:2021-03-07 热度:136
1.指令: (1) samtools mpileup -vf Homo_sapiens_assembly19chr20.fasta NA12878_snp_A2G_chr20_225058.sorted.bam NA12878_snp_A2G_chr20_225058.variants 或者: samtools mpileup -vf Homo_sapiens_assembly19chr20.fasta NA12878_snp_A2G_chr20_225[详细]
-
推荐系统技术 --- 文本相似性计算(二)
所属栏目:[大数据] 日期:2021-03-07 热度:197
副标题#e# 第一篇地址:推荐系统技术之文本相似性计算(一)上一篇中我们的小明已经中学毕业了,今天这一篇继续文本相似性的计算。首先前一篇不能解决的问题是因为我们只是机械的计算了词的向量,并没有任何上下文的关系,所以思想还停留在机器层面,还没有[详细]
-
基因数据处理35之使用samtools和bcftools进行变异分析2--连续处
所属栏目:[大数据] 日期:2021-03-07 热度:122
指令: samtools mpileup -uf Homo_sapiens_assembly19chr20.fasta NA12878_snp_A2G_chr20_225058_longer.sorted.bam | bcftools call -mv NA12878_snp_A2G_chr20_225058_longer.raw.vcf bcftools filter -s LowQual -e '%QUAL20 || DP100' NA12878_snp_A2[详细]
-
nyoj 28 大数阶乘
所属栏目:[大数据] 日期:2021-03-07 热度:184
大数阶乘 时间限制: 3000?ms ?|? 内存限制: 65535?KB 难度: 3 描述 我们都知道如何计算一个数的阶乘,可是,如果这个数很大呢,我们该如何去计算它并输出它? 输入 输入一个整数m(0m=5000) 输出 输出m的阶乘,并在输出结束之后输入一个换行符 样例输入[详细]
-
机器学习中的相似性度量:距离,原来还有这么多类
所属栏目:[大数据] 日期:2021-03-06 热度:167
副标题#e# 来自:苍梧 - 博客园 链接:http://www.cnblogs.com/heaad/archive/2011/03/08/1977733.html 在做分类时常常需要估算不同样本之间的相似性度量(SimilarityMeasurement),这时通常采用的方法就是计算样本间的“距离”(Distance)。采用什么样的方法[详细]
-
Twitter开源大数据实时分析系统Heron:Heron架构
所属栏目:[大数据] 日期:2021-03-06 热度:114
副标题#e# Heron架构 Heron是Apache Storm的一个直接继承者。从架构角度来看,它与Storm截然不同,但是从API的角度看它是完全向后兼容的。 下面的章节指明了Heron和Storm的区别,描述了Heron背后的设计目标,并解释了其架构的主要组件。 代码库 Heron代码库[详细]
-
大数据分析界的“神兽”Apache Kylin初解
所属栏目:[大数据] 日期:2021-03-06 热度:136
副标题#e# 转自李栋,来自Kyligence公司,也是Apache Kylin Committer PMC member,在加入Kyligence之前曾就职于eBay、微软。 今天分享的主题是:聊聊“神兽”Apache Kylin的最新特性。本次分享将首先对Apache Kylin进行基本介绍;接下来介绍1.5.x最新版本[详细]
-
kylin-BI工具-tableau9
所属栏目:[大数据] 日期:2021-03-06 热度:141
副标题#e# Tableau 9 Tableau 9.x has been released a while,there are many users are asking about support this version with Apache Kylin. With updated Kylin ODBC Driver,now user could interactive with Kylin service through Tableau 9.x. Apac[详细]
-
Presto随笔
所属栏目:[大数据] 日期:2021-03-06 热度:75
解决了什么问题 快读的交互式查询 presto 和hive到底什么关系 http://www.mutouxiaogui.cn/blog/?p=395 和hive在一个层级,都是基于hdfs的。但是presto可以借助hive的元信息找到hdfs上的节点。 presto现在已经可以连接 MySQL postgre hive等了 presto为什[详细]
-
HDOJ/HDU 5686 Problem B(斐波拉契+大数~)
所属栏目:[大数据] 日期:2021-03-06 热度:90
Problem Description 度熊面前有一个全是由1构成的字符串,被称为全1序列。你可以合并任意相邻的两个1,从而形成一个新的序列。对于给定的一个全1序列,请计算根据以上方法,可以构成多少种不同的序列。 Input 这里包括多组测试数据,每组测试数据包含一个[详细]
-
数据处理的 9 大编程语言
所属栏目:[大数据] 日期:2021-03-06 热度:139
副标题#e# (点击上方公众号,可快速关注) 英文:Anna Nicolauo 译者:伯乐在线 - 胡波 链接:http://blog.jobbole.com/100732/ 有关大数据的话题一直很火热。伴随着信息的爆炸式增长,大数据渗透到了各行各业,广泛应用于公司中,同时也使得传统的软件比[详细]
-
基因数据处理28之avocado运行
所属栏目:[大数据] 日期:2021-03-06 热度:67
需要注意的是如果使用avocado的命令行,fs和fq为hdfs路径,properties为本地路径: hadoop@Master:~/xubo/data/testTools/se$ avocado-submit /xubo/avocado/hs1.fq /xubo/avocado/hs38DH.fa /xubo/avocado/test20160527 /home/hadoop/cloud/avocado/basic[详细]
-
LightOJ 1370 Bi-shoe and Phi-shoe(欧拉函数)
所属栏目:[大数据] 日期:2021-03-06 热度:164
题目链接: LightOJ 1370 Bi-shoe and Phi-shoe 题意: 给出n个数,要求对每个数a[i]找一个数x[i]使得小于x[i]且与x[i]互素的数的个数不小于a[i],求出所有x[i]的最小和。 分析: 和最小则每个数对应的x[i]应最[详细]
-
基因数据处理26之bcftools安装和使用
所属栏目:[大数据] 日期:2021-03-06 热度:175
1.下载: https://github.com/samtools/bcftools 2.安装 make make install 3.结合samtools使用 对排序好的bam数据用samtools生成bcf文件: xubo@xubo:~/xubo/data/testTools/se$ samtools mpileup -ugf ../hs38DH.fa hs2.sort.bam hs2.bcf 由于生成的是二[详细]
-
为了驾驭大数据处理,中外互联网巨头做了同样的选择
所属栏目:[大数据] 日期:2021-03-05 热度:150
副标题#e# 数据,数据,我要大数据 在今天这个大数据的时代,数据已经成为了许多企业发展的命脉。 图片转自synergicpartners 有些企业需要数据来形成用户洞察,有的企业需要数据来优化业务流程;甚至对于部分企业来说,数据就是他们最珍贵的资产。 在这个卖[详细]
-
R语言做文本挖掘 Part2分词处理
所属栏目:[大数据] 日期:2021-03-05 热度:193
副标题#e# ?? 转载:http://www.voidcn.com/article/p-qkxmglmf-pw.html Part2分词处理 【发现有人转载,决定把格式什么重新整理一遍,有时间做个进阶版文本挖掘,恩!原文地址:CSDN-R语言做文本挖掘 Part2分词处理】 在RStudio中安装完相关软件包之后,才[详细]
-
数盟说 | 用文本挖掘找出50年以来最流行的音乐
所属栏目:[大数据] 日期:2021-03-05 热度:160
副标题#e# 【数盟致力于成为最卓越的数据科学社区,聚焦于大数据、分析挖掘、数据可视化领域,业务范围:线下活动、在线课程、猎头服务、项目对接】 本文为数盟原创译文,转载请注明出处,并务必保留本文底部二维码。 从1958年开始每年十二月Billboard都会[详细]
-
重视BI分析工具 光有想法是不够的
所属栏目:[大数据] 日期:2021-03-05 热度:102
点击上方蓝色字体关注。 您还可以搜索公众号“ D1net”选择关注D1net旗下的各领域(云计算,数据中心,大数据,CIO,企业协作,网络数通,信息安全,企业移动应用,系统集成,服务器,存储,呼叫中心,视频会议,视频监控等)的子公众号。 ======= 虽然认[详细]
-
??案例|:PayPal如何利用大数据分析提升业绩和打击欺诈?(信息
所属栏目:[大数据] 日期:2021-03-05 热度:183
副标题#e# 编者注:经常海淘或出国的朋友对“PayPal”肯定很熟悉,在北美及欧洲,PayPal的地位相当于中国的支付宝。每天要准确无误的处理来自全球的交易数据,PayPal是如何做到的呢?这篇文章将详细为大家介绍。 PayPal,就是我们通常说的“PayPal贝宝国际[详细]
-
【工作帮】福州的数据人有福了,招数据分析师,年薪20万
所属栏目:[大数据] 日期:2021-03-05 热度:181
机会留给有准备着的人! 选择比努力更重要! ? 高薪聘用:数据分析师 工作职责: 1.根据不同的业务主题,进行数据建模、挖掘; 2.为精准运营和个性化服务提供数据模型和算法支持;? 3.建立业务模型、用户画像,对产品决策制定形成良好的数据支撑; 4.通过[详细]