物信息学数据格式的习题(blast/blat/fa-fq/sam-bam/vcf/bed/gtf-gff),收集这些格式的说明书。

VCF格式文件的shell小练习

原文链接

首先使用bowtie2软件自带的测试数据生成sam/bam文件,还有vcf文件

代码如下:

mkdir -p ~/biosoft
cd ~/biosoft
wget https://mirrors.tuna.tsinghua.edu.cn/anaconda/miniconda/Miniconda3-latest-Linux-x86_64.sh 
bash Miniconda3-latest-Linux-x86_64.sh 
source ~/.bashrc 
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/bioconda
conda config --set show_channel_urls yes
conda create -y -n test
conda activate test
conda install -y samtools bcftools

wget https://sourceforge.net/projects/bowtie-bio/files/bowtie2/2.3.4.3/bowtie2-2.3.4.3-linux-x86_64.zip 
unzip bowtie2-2.3.4.3-linux-x86_64.zip 
cd ~/biosoft/bowtie2-2.3.4.3-linux-x86_64/example/reads

../../bowtie2 -x ../index/lambda_virus -1 reads_1.fq -2 reads_2.fq | samtools sort -@ 5 -o tmp.bam - 
bcftools mpileup -f ../reference/lambda_virus.fa tmp.bam |bcftools call -vm > tmp.vcf

LINUX练习题

  1. 把突变记录的vcf文件区分成 INDEL和SNP条目
  2. 统计INDEL和SNP条目的各自的平均测序深度
  3. 把INDEL条目再区分成insertion和deletion情况
  4. 统计SNP条目的突变组合分布频率
  5. 找到基因型不是 1/1 的条目,个数
  6. 筛选测序深度大于20的条目
  7. 筛选变异位点质量值大于30的条目
  8. 组合筛选变异位点质量值大于30并且深度大于20的条目
  9. 理解DP4=4,7,11,18 这样的字段,就是 Number of high-quality ref-forward , ref-reverse, alt-forward and alt-reverse bases 计算每个变异位点的 AF
  10. 在前面步骤的bam文件里面找到这个vcf文件的某一个突变位点的测序深度表明的那些reads,并且在IGV里面可视化bam和vcf定位到该变异位点。

其它思考题

  1. vcf的全称是什么?是用来记录什么信息的标准格式的文本?

  2. 一般选用哪个指令查看vcf文件,为什么不用vim?

  3. vcf文件以’##’开头的是什么信息?请认真查看这些信息。’#’开头的是什么信息?

  4. Vcf文件除头信息,每行有多少列,请详细叙述每行的含义!请准确记忆。

  5. 理解format列和样本列的对应关系以及GT AD DP的含义。

  6. Vcf文件第三列如果不是’.’,出现的rs号的id是什么?

  7. Vcf文件的ref,alt列和样本列的0/1 1/1 或者1/2的联系?

  8. Vcf文件一般用什么软件生成?请至少说出两个软件。请注意不同软件生成的vcf格式的稍有不同的地方。

  9. Vcf文件一般都比较大,压缩后的.gz文件用什么指令直接查看而不用解压后查看?

  10. 了解gvcf是什么格式,gvcf全称是什么?他与vcf有什么前后联系?

  11. 把alt列出现’,’的行提取出来

  12. 请将chrid、postion、ref、alt、format、样本列切割出来生成一个文本

  13. 将一个含snp,indel信息的vcf拆成一个只含snp,一个只含indel信息的2个vcf文件。可借鉴软件

  14. 用指令操作indel的vcf文件,提取indel长度>4的变异行数,存成一个文本。

  15. 用Vcftools过滤vcf文件,如maf 设置成0.05, depth设置成5-20,统计过滤前后的变异位点的总个数

  16. 利用vcftools提取每个样本每一个位点的变异信息和深度信息,生成一个矩阵的文件,至少含义以下信息

Eg:

CHRID POSTION SAMPLE_DP SAMPLE_GT
chr1 1010 5 AA
  1. 提取出变异位点上样本有纯和突变的行数

  2. 统计一下1号染色体上的变异总个数。

  3. 提取一下BRCA1基因上发生变异的行数,如果是人类wes变异结果文件

  4. 统计vcf文件各样本的缺失率,如果是多个样本的群体call结果。

进阶思考题:可视化vcf中变异位点质量值,横坐标是质量值,纵坐标是百分比或者该质量值时的变异位点的总个数,可以化成线图或者点图(可能需要学一些代码,还有R画图)

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,230评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,261评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,089评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,542评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,542评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,544评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,922评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,578评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,816评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,576评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,658评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,359评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,937评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,920评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,156评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,859评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,381评论 2 342

推荐阅读更多精彩内容

  • 上次我们整理到bwa比对后得到bam文件,下一步我们要通过GATK流程从bam文件中call variant。一、...
    凤凰_0949阅读 2,670评论 0 7
  • 刘小泽写于18.7.17所有的数据,一旦要找变异位点信息,就离不开VCF。豆豆也是在写一个重测序的操作流程,遇到了...
    刘小泽阅读 32,796评论 2 73
  • 刘小泽写于18.8.10,补充于18.8.14-15这之间经历了第一期授课结课,(回中山办购房手续)遥墙机场读了1...
    刘小泽阅读 9,244评论 6 41
  • 刘小泽写于18.12.31再次知识迭代:打算以上中下三篇来认识一个新事物上篇:主要了解VCF的背景知识;一般我们会...
    刘小泽阅读 9,915评论 2 37
  • 创业的种子在我很小的时候,就已经在我的心里生根发芽。 那个时候看着家乡绵延起伏的群山、稻田,一个个天真的想法在我的...
    Queen的婚姻育儿观阅读 194评论 0 4