-
基因数据处理38之dbSnpId到omimId的映射表
所属栏目：[大数据] 日期：2021-03-08 热度：90
1.下载： 首先收到【2】，来源是【2】 【1】中有描述： You can also get those SNPs with an OMIM ID number by downloading from the dbSNP FTP site: the OmimVarLocusIdSNP table contains the information you need for your organisim of interest (hu[详细]
-
基因数据处理39之mango安装记录
所属栏目：[大数据] 日期：2021-03-08 热度：131
更多代码请见：https://github.com/xubo245/AdamLearning 1解释 mango安装记录 mango主要是在adam上实现 可视化平台 A scalable genome browser 2.代码： git clone https: //github.com/bigdatagenomics/mango.git cd mangomvn clean package -DskipTests[详细]
-
基因数据处理41之mango使用失败
所属栏目：[大数据] 日期：2021-03-08 热度：186
hadoop@Master:~/xubo/tools/adam- 2.10 - 0.19 -git/bin$ mango-submit /xubo/mango/snap/datatest .fa .adam -read_files /xubo/mango/snap/datatest2 .sort .bam .adam -var_files /xubo/mango/snap/datatest2 .flt .vcf .adam -feat_file /xubo/mango/sn[详细]
-
51NOD 1116 K进制下的大数(字符串取模 + 枚举)
所属栏目：[大数据] 日期：2021-03-08 热度：186
传送门 1116 K进制下的大数 基准时间限制：1 秒 空间限制：131072 KB 分值: 20 难度：3级算法题 收藏 关注 有一个字符串S，记录了一个大数，但不知这个大数是多少进制的，只知道这个数在K进制下是K - 1的倍数。现在由你来求出这个最小的进制K。 例如：给出的[详细]
-
poj3181 Dollar Dayz (DP+大数)
所属栏目：[大数据] 日期：2021-03-08 热度：200
Dollar Dayz Crawling in process... Crawling failed Time Limit: 1000 MS???? Memory Limit: 65536 KB???? 64bit IO Format: %I64d %I64u Submit Status Practice POJ 3181 Appoint description: System Crawler (2016-05-27) Description Farmer John goe[详细]
-
基因数据处理40之bedtools的安装和使用
所属栏目：[大数据] 日期：2021-03-08 热度：186
1.下载： git clone https: //github.com/arq5x/bedtools.git 2.编译： make 3.配置： cp * /usr/local /bin/ 4.运行： bam变成bed hadoop @Master :~/xubo/data/snap $ bamToBed -i datatest.sorted.bam datatest.sorted.bed 查看： hadoop @Master :~/xubo[详细]
-
基因数据处理42之mango问题_seqdict.avro不存在解决
所属栏目：[大数据] 日期：2021-03-08 热度：136
参考【1】中问题解决 问题分析：这是新版本的问题：adam0.19.1目前在maven中心仓库没有 解决办法： package org.gcdss.test import java.io.File import java.nio.file.Files import org.apache.parquet.hadoop.metadata.CompressionCodecName import org.ap[详细]
-
基因数据处理43之mango之503错误
所属栏目：[大数据] 日期：2021-03-08 热度：101
HTTP ERROR : 503 Problem accessing /. Reason : Service Unavailable Powered by Jetty :// 更详细请见： https://github.com/bigdatagenomics/mango/issues/181[详细]
-
WindowsXP SP3 AFD.sys 本地拒绝服务漏洞的挖掘过程
所属栏目：[大数据] 日期：2021-03-07 热度：173
标 题: WindowsXP SP3 AFD.sys 本地拒绝服务漏洞的挖掘过程 时 间: 2013-03-17,15:22:33 这是本人第一次做漏洞挖掘，2月的时候开始研究漏洞挖掘技术，2月24号那天在进行Fuzz测试的时候偶然的发现了一个afd.sys未处理的异常，然后就对这个异常如获至宝的分析[详细]
-
520我与大数据有个约会——上海大数据创新应用论坛完美落幕
所属栏目：[大数据] 日期：2021-03-07 热度：126
2016年5月20日周五下午，由上海市大数据联盟牵头，慧与(中国)有限公司、联通小沃科技与华院数据共同承办，来自金融服务业、运营商、零售及电商、制造等行业的大数据应用先行者们为各行各业170余位来宾们打开了一扇通向大数据应用落地彼岸的智慧之门。会议由[详细]
-
基因数据处理31之avocado运行avocado-cli中的avocado问题3-变异
所属栏目：[大数据] 日期：2021-03-07 热度：157
读入的read为： val fqFile = "hs38DHSE1L100F1.sam" 读取结果： cleanedReads. count : 1 { "readNum" : 0 , "contig" : { "contigName" : "chrUn_KN707963v1_decoy" , "contigLength" : 62955 , "contigMD5" : null , "referenceURL" : null , "assembly"[详细]
-
基因数据处理32之Avocado运行记录(人造数据集)
所属栏目：[大数据] 日期：2021-03-07 热度：191
主要是需要数据正确，如果中间缺少记录，avocado一般不会成功 1.代码： Avocado修改： /** * Licensed to Big Data Genomics (BDG) under one * or more contributor license agreements. See the NOTICE file * distributed with this work for additional[详细]
-
基因数据处理33之Avocado运行记录(参考基因组)
所属栏目：[大数据] 日期：2021-03-07 热度：157
1.数据下载： avocaodo的test resource中 2.预处理： cat Homo_sapiens_assembly19 .fasta | grep -i -n '' Homo_sapiens_assembly19Head .txt cat Homo_sapiens_assembly19Head .txt cat Homo_sapiens_assembly19 .fasta | head - 34770016 |tail - 787820[详细]
-
基因数据处理36之qc-metrics安装
所属栏目：[大数据] 日期：2021-03-07 热度：95
更多代码请见：https://github.com/xubo245/SparkLearning Spark中组件Mllib的学习之基础概念篇 1解释 Read and variant metrics,useable for pipeline quality control purposes qc-metrics主要是用于read和变异的度量，流水线质量控制的目的 2.代码： git[详细]
-
基因数据处理34之使用samtools和bcftools进行变异分析
所属栏目：[大数据] 日期：2021-03-07 热度：60
1.指令： （1） samtools mpileup -vf Homo_sapiens_assembly19chr20 .fasta NA12878_snp_A2G_chr20_225058 .sorted .bam NA12878_snp_A2G_chr20_225058 .variants 或者： samtools mpileup -vf Homo_sapiens_assembly19chr20 .fasta NA12878_snp_A2G_chr20_[详细]
-
推荐系统技术 --- 文本相似性计算（二）
所属栏目：[大数据] 日期：2021-03-07 热度：155
第一篇地址：推荐系统技术之文本相似性计算（一） 上一篇中我们的小明已经中学毕业了，今天这一篇继续文本相似性的计算。 首先前一篇不能解决的问题是因为我们只是机械的计算了词的向量，并没有任何上下文的关系，所以思想还停留在机器层面，还没有到更高的[详细]
-
基因数据处理35之使用samtools和bcftools进行变异分析2--连续处
所属栏目：[大数据] 日期：2021-03-07 热度：75
指令： samtools mpileup -uf Homo_sapiens_assembly19chr20 .fasta NA12878_snp_A2G_chr20_225058_longer .sorted .bam | bcftools call -mv NA12878_snp_A2G_chr20_225058_longer .raw .vcf bcftools filter -s LowQual -e '%QUAL20 || DP100' NA12878_snp[详细]
-
nyoj 28 大数阶乘
所属栏目：[大数据] 日期：2021-03-07 热度：68
大数阶乘 时间限制： 3000 ?ms ?|? 内存限制： 65535 ?KB 难度： 3 描述 我们都知道如何计算一个数的阶乘，可是，如果这个数很大呢，我们该如何去计算它并输出它？ 输入 输入一个整数m(0m=5000) 输出 输出m的阶乘，并在输出结束之后输入一个换行符 样例输入[详细]
-
PrefixSpan序列模式挖掘算法
所属栏目：[大数据] 日期：2021-03-06 热度：94
介绍 与GSP一样，PrefixSpan算法也是序列模式分析算法的一种，不过与前者不同的是PrefixSpan算法不产生任何的侯选集，在这点上可以说已经比GSP好很多了。PrefixSpan算法可以挖掘出满足阈值的所有序列模式，可以说是非常经典的算法。序列的格式就是上文中提到[详细]
-
1.大道至简的数据处理工具（Power Query）
所属栏目：[大数据] 日期：2021-03-06 热度：78
? ?如果你不想学复杂的函数，如果不想学更难的VBA。但你想把数据处分分析工作做好。那么，来吧！这套课程将是你最好的选择。远离繁杂，回归简单与智能化。 ? ?先来看看power query 怎么做些什么。先来展示一下效果图。[详细]
-
文本挖掘分析《欢乐颂》到底谁和谁堪称好闺蜜、谁和谁又最为般配
所属栏目：[大数据] 日期：2021-03-06 热度：59
? 听说最近大家都在看《欢乐颂》，这部热剧里，女性可谓是绝对的主角，22楼5个女房客的互动好像把男性角色们的风头都抢光了；但是热门剧中又总是不能缺了言情戏的点缀。所以，《欢乐颂》到底谁和谁堪称好闺蜜、谁和谁又最为般配呢？还是让文本挖掘为你揭晓吧[详细]
-
用户研究基础流程和 SPSS 快速数据处理
所属栏目：[大数据] 日期：2021-03-06 热度：146
本公众号为阿里巴巴集团 CCOUX 所属，我们会定期为您推送一些用户体验相关的原创以及一些国外文章的翻译，希望您会喜欢并关注我们。请点击上方「37点2度体验」关注我们吧！ 尽管基于在线行为监测的业务数据分析越来越被企业重视，在用户研究领域，问卷调查仍[详细]
-
手慢无｜StuQ邀你免费参加付费小班课大数据分析平台的首节预演
所属栏目：[大数据] 日期：2021-03-06 热度：65
是的，你没有看错。可以免费观看 StuQ 精品付费小班课预演啦，小编又给大家谋福利了。 什么是『付费小班课预演』 付费小班课： 直播辅导教学，1位领域专家与30位学员团结在一起，连续7周，只为一个共同目标，学会一个职业技能。全程使用StuQ视频直播和在线协[详细]
-
大数定理_介绍和证明
所属栏目：[大数据] 日期：2021-03-06 热度：142
? ? ? 证明： 其实仔细看看公式下面的一句话： X的方差越少，事件{|x-u|e}发生的概率越大。 由于n无限的接近 总的变量数，导致X无限的接近期望u,所以方差约等于0 所 p{|x-u| =1-0/(e 2 )=1-0=1 (概率p的最大值＝1) ? 伯努利定理： ? ?[详细]
-
机器学习中距离和相似性度量方法
所属栏目：[大数据] 日期：2021-03-06 热度：79
在机器学习和数据挖掘中，我们经常需要知道个体间差异的大小，进而评价个体的相似性和类别。最常见的是数据分析中的相关分析，数据挖掘中的分类和聚类算法，如 K 最近邻（KNN）和 K 均值（K-Means）等等。根据数据特性的不同，可以采用不同的度量方法。一般[详细]
