Blast和Fasta的应用与原理.pptx

1内容提要1.基本概念 相似性，同源性2.Blast介绍 Blast资源和相关问题3.Blast的应用 网络版 单机版4.深入了解Blast(改进程序，算法基础)5.其他的序列相似性搜索工具（fasta）2生物序列的相似性相似性：相似性：是指一种很直接的数量关系数量关系，比如部分相同或相似的百分比或其它一些合适的度量。比如说，A序列和B序列的相似性是80，或者4/5。这是个量化的关系。当然可进行自身局部比较。3同源性：同源性：指从一些数据中推断出的两个基因或蛋白质序列具而共同祖先的结论，属于质的质的判断判断。就是说A和B的关系上，只有是同源序列，或者非同源序列两种关系。而说A和B的同源性为80都是不科学的。生物序列的同源性4相似性和同源性关系序列的相似性和序列的同源性有一定的关系，一般来说序列间的相似性越高的话，它们是同源序序列间的相似性越高的话，它们是同源序列的可能性就更高列的可能性就更高，所以经常可以通过序列的相似性来推测序列是否同源。正因为存在这样的关系，很多时候对序列的相似性和同源性就没有做很明显的区分，造成经常等价混用两个名词。所以有出现A序列和B序列的同源性为80一说。5序列相似性比较和序列同源性分析序列相似性比较和序列同源性分析序列相似性比较：序列相似性比较：就是将待研究序列与DNA或蛋白质序列库进行比较，用于确定该序列的生物属性，也就是找出与此序列相似的已知序列是什么。完成这一工作只需要使用两两序列比较算法。常用的程序包有BLAST、FASTA等；序列同源性分析：序列同源性分析：是将待研究序列加入到一组与之同源，但来自不同物种的序列中进行多序列同时比较，以确定该序列与其它序列间的同源性大小。这是理论分析方法中最关键的一步。完成这一工作必须使用多序列比较算法。常用的程序包有CLUSTAL等；6Blast简介（一）BLAST 是由美国国立生物技术信息是由美国国立生物技术信息中心（中心（NCBI）开发的一个基于开发的一个基于序列相似性序列相似性的数据库搜的数据库搜索程序。索程序。BLAST是是“局部相似性基本查询工局部相似性基本查询工具具”(Basic Local Alignment Search Tool)的的 缩写。缩写。7 Blast 是一个序列相似性搜索的程序包，是一个序列相似性搜索的程序包，其中包含了很多个独立的程序，这些程序其中包含了很多个独立的程序，这些程序是根据查询的对象和数据库的不同来定义是根据查询的对象和数据库的不同来定义的。比如说查询的序列为核酸，查询数据的。比如说查询的序列为核酸，查询数据库亦为核酸序列数据库，那么就应该选择库亦为核酸序列数据库，那么就应该选择blastn程序。程序。下表列出了主要的下表列出了主要的blast程序。程序。Blast简介（二）8主要的blast程序程序名查询序列数据库搜索方法Blastn核酸核酸核酸序列搜索逐一核酸数据库中的序列Blastp蛋白质蛋白质蛋白质序列搜索逐一蛋白质数据库中的序列Blastx核酸蛋白质核酸序列6框翻译成蛋白质序列后和蛋白质数据库中的序列逐一搜索。Tblastn蛋白质核酸蛋白质序列和核酸数据库中的核酸序列6框翻译后的蛋白质序列逐一比对。TBlastx核酸核酸核酸序列6框翻译成蛋白质序列，再和核酸数据库中的核酸序列6框翻译成的蛋白质序列逐一进行比对。9Blast相关的问题w怎么获得blast服务,怎么使用的问题？w为什么使用blast，可以获得什么样的信息？w其他问题：实际使用时选择哪种方式（网络，本地化），参数的选择，结果的解释10Blast资源1.NCBI主站点：http:/www.ncbi.nlm.nih.gov/BLAST/(网络版)ftp:/ftp.ncbi.nlm.nih.gov/blast/(单机版)2.其他站点：http:/ http:/www.fruitfly.org/blast/（果蝇）11Blast结果给出的信息 Blast结果会列出跟查询序列相似性比较高，符合限定要求的序列结果，根据这些结果可以获取以下一些信息。1.查询序列可能具有某种功能2.查询序列可能是来源于某个物种3.查询序列可能是某种功能基因的同源基因这些信息都可以应用到后续分析中。12两种版本的Blast比较（一）w网络版本 包括NCBI在内的很多网站都提供了在线的blast服务，这也是我们最经常用到的blast服务。网络版本的blast服务就有方便，容易操作，数据库同步更新等优点。但是缺点是不利于操作大批量的数据，同时也不能自己定义搜索的数据库。13w单机版 单机版的blast可以通过NCBI的ftp站点获得，有适合不同平台的版本（包括linux，dos等）。获得程序的同时必须获取相应的数据库才能在本地进行blast分析。单机版的优点是可以处理大批的数据，可以自己定义数据库，但是需要耗费本地机的大量资源，此外操作也没有网络版直观、方便，需要一定的计算机操作水平。两种版本的Blast比较（二）14NCBI提供的Blast服务登陆ncbi的blast主页核酸序列蛋白序列翻译序列底下有其他一些针对特殊数据库的和查看以往的比对结果等15Blast任务提交表单（一）1.序列信息部分填入查询（query）的序列序列范围（默认全部）选择搜索数据库如果接受其他参数默认设置，点击开始搜索16Blast任务提交表单（二）设置搜索的范围，entrez关键词，或者选择特定物种2.设置各种参数部分一些过滤选项，包括简单重复序列，人类基因组中的重复序列等E值上限窗口大小如果你对blast的命令行选项熟悉的话，可以在这里加入更多的参数17Blast任务提交表单（三）3.设置结果输出显示格式选择需要显示的选项以及显示的文件格式显示数目Alignment的显示方式筛选结果E值范围其他一些显示格式参数点击开始搜索18提交任务返回查询号（request id）可以修改显示结果格式修改完显示格式后点击进入结果界面19结果页面（一）图形示意结果20结果页面（二）目标序列描述部分带有genbank的链接，点击可以进入相应的genbank序列匹配情况，分值，e值21结果页面（三）详细的比对上的序列的排列情况22一个具体的例子（blastp）假设以下为一未知蛋白序列query_seq MSDNGPQSNQRSAPRITFGGPTDSTDNNQNGGRNGARPKQRRPQGLPNNTASWFTALTQHGKEELRFPRGQGVPINTNSGPDDQIGYYRRATRRVRGGDGKMKELSPRWYFYYLGTGPEASLPYGANKEGIVWVATEGALNTPKDHIGTRNPNNNAATVLQLPQGTTLPKGFYAEGSRGGSQASSRSSSRSRGNSRNSTPGSSRGNSPARMASGGGETALALLLLDRLNQLESKVSGKGQQQQGQTVTKKSAAEASKKPRQKRTATKQYNVTQAFGRRGPEQTQGNFGDQDLIRQGTDYKHWPQIAQFAPSASAFFGMSRIGMEVTPSGTWLTYHGAIKLDDKDPQFKDNVILLNKHIDAYKTFPPTEPKKDKKKKTDEAQPLPQRQKKQPTVTLLPAADMDDFSRQLQNSMSGASADST QA 我们通过blast搜索来获取一些这个序列的信息。23具体步骤1.登陆blast主页 http:/www.ncbi.nlm.nih.gov/BLAST/2.根据数据类型，选择合适的程序3.填写表单信息4.提交任务5.查看和分析结果24分析过程（一）1.登陆ncbi的blast主页2.选择程序，因为查询序列是蛋白序列可以选择blastp，点击进入也可以选择tblastn作为演示，我们这里选blastp25分析过程（二）3.填入序列（copypaste）Fasta格式，或者纯序列4.选择搜索区域，这里我们要搜索整个序列，不填5.选择搜索数据库，这里我们选nr(非冗余的蛋白序列库)。是否搜索保守区域数据库（cdd），蛋白序列搜索才有。我们选上26分析过程（三）6.限制条件，我们限制在病毒里面找。7.其他选项保持默认值打分矩阵27分析过程（四）8.输出格式选项保持默认值9.点击开始搜索28分析过程（五）10.查询序列的一些相关信息在cdd库里面找到两个保守区域，点击可以进入29分析过程（六）图形结果30分析过程（七）匹配序列列表31分析过程（八）具体匹配情况32为什么使用单机版的Blast？1.特殊的数据库要求。2.涉及序列的隐私与价值。3.批量处理4.其他原因？单机版的Blast使用（一）33单机版Blast的基本操作过程1.下载单机版的Blast程序ftp:/ftp.ncbi.nlm.nih.gov/blast/executables/目录下，下载对应的操作系统版本。2.解压程序包(blast.tar.gz)命令是:$tar zxvf blast.tar.gz单机版的Blast使用（二）343.获取Blast数据库a.直接从ncbi下载ftp:/ftp.ncbi.nlm.nih.gov/blast/db/b.用Blast程序包提供的formatdb工具自己格式化序列数据成数据库。假设有一序列数据（sequence.fa，多序列，fasta格式），欲自己做成Blast数据库，典型的命令如下：单机版的Blast使用（三）35核酸序列：$./formatdb i sequence.fa p F o T/F n db_name蛋白序列：$./formatdb i sequence.fa p T o T/F n db_name单机版的Blast使用（四）364.执行Blast比对获得了单机版的Blast程序，解压开以后，如果有了相应的数据库（db），那么就可以开始执行Blast分析了。单机版的Blast程序包，把基本的blast分析，包括blastn，blastp，blastx等都整合到了blastall一个程序里面。单机版的Blast使用（五）37以下是一个典型的blastn分析命令：(待分析序列seq.fa，数据库nt_db)$./blastall p blastn i seq.fa -d nt_db w 7 e 10 o 程序名 输入 数据库 窗口 e值 输出seq.blastn.out 该命令的意思是，对seq.fa文件中的核酸序列对nt_db数据库执行blastn搜索，窗口大小是7，e值限制是10，输出的结果保存到文件seq.blastn.out 中。单机版的Blast使用（六）385.Blastall的常用参数-p 程序名应该是blastn，blastp，blastx，tblastn，tblastx中的一个-d 数据库名称，默认nr-i 查询序列文件，默认stdin-e E值限制，默认10-o 结果输出文件，默认stdout-F 过滤选项，默认T单机版的Blast使用（七）39进一步深入Blast1.blast22.Megablast3.Psi-blast4.其他(rpsblast,blastclust等)40Blast2 两个序列的blast比对，给定两个序列，相互进行blast比对。能快速检查两个序列是否存在相似性片断或者是否一致。这比起全序列比对要快很多。41Megablast wmegablast采用了贪婪算法(greedy algorithm),它连接了多个查询序列进行一次搜索比对，这样节省了很多搜索数据库的时间。主要针对核酸序列。是blast经过优化后，适用于由于测序或者其他原因形成的轻微的差别的序列之间的比较，比一般的相似性搜索程序要快10倍，可以很快的完成两组大数据的比对。42PSI-blast Position specific iterative BLAST(PSI-BLAST)位点特异的迭代blast搜索，主要针对蛋白序列。第一次blast搜索后，结果中最相似的序列重新构建PSSM(位点特异性打分矩阵)，然后再使用该矩阵进行第二轮blast搜索，再调整矩阵，搜索，如此迭代。最终高度保守的区域就会得到比较高的分值，而不保守的区域则分数降低，趋近0。这样可以提高提高blast搜索的灵敏度。搜索的灵敏度。43Blast的算法基础w基本思想是：通过产生数量更少的但质量更好的增强点来提高速度。wBALST算法是建立在严格的统计学的基础之上的。它集中于发现具有较高的相似性的局部比对，且局部比对中不能含有空位（blast2.0引入了允许插入gap的算法）。w由于局部比对的限制条件，在大多数情况下比对会被分解为若干个明显的HSP(High-score Sequence Pairs)。44Blast的算法流程451.首先确定一个终止值S、步长参数w和一个阈值t。S值通常是基于统计学的原理指明一个预期的终止E值，然后软件会在考虑搜索背景性质的基础上计算出合适的S值。使要比对的序列中包含一个分值不小于S的HSP。Blast的算法（一）46Blast的算法（二）2.引入邻近字串的思想：不需要字串确切地匹配，当有一个字串的分值高于t时，BALST就宣称找到了一个选中的字串。为了提高速度，允许较长的字串长度W。W值很少变化，这样，t值就成为权衡速度和敏感度的参数。47Blast的算法（三）3.一个字串选中后，程序会进行没有空位的局部寻优，比对的最低分值是S，当比对延伸时会遇到一些负的分值，使得比对的分值下降，当下降的分值小于S时，命中的延伸就会终止。这样系统会减少消耗于毫无指望的选中延伸的时间，使系统的性能得以改进。48w在1997年提出了对BLAST程序的改进算法，提高了搜索速度、敏感度和实用性。n可处理间隔(gap)的gapped BLAST算法nPSI-BLAST算法l对一个选中字串长度标准的延伸 l利用profile(表头文件)的数据结构来进行搜索Blast的改进（一）49w扩大步长，以步长为2w来搜索。w允许位于不同的对角线的两个片段拼接在一起。位于不同对角线的两个片段拼接在一起的前提条件是：拼接后片段的分值不小于某一个终止值。w执行通常的BLAST算法，使用一种不同的记分方式，根据高度显著比对(HSPs)的最高分值建立一个最初的profile。Blast的改进（二）50w根据该profile反复利用BLAST算法对数据库进行搜索，这一步实际上是根据表头文件的统计结果扩展局部比对。这一过程是反复进行的，直到再没有发现新的有意义的匹配为止。由于在每一轮都会有新的片段加入，因此在操作过程中profile需要在每一个循环结束之后更新。Blast的改进（三）51其他的序列相似性搜索工具 fasta FastA算法是由Lipman和Pearson于1985年发表的（Lipman和Pearson，1985）。FastA的基本思路是识别识别与代查序列相匹配的很短的序列片段与代查序列相匹配的很短的序列片段，称为k-tuple。以下链接是EBI提供的fasta服务。http:/www.ebi.ac.uk/fasta33/52帮助信息各个参数选项填入搜索序列53w基本思想是：一个能够揭示出真实的序列关系的比对至少包含一个两个序列都拥有的字(片断)，把查询序列中的所用字编成索引，然后在数据库搜索时查询这些索引，以检索出可能的匹配，这样那些命中的字很快被鉴定出来。FASTA算法基础541.确定参数ktup，在两个序列中查找长度为ktup的、相匹配的片段(增强点)。为了提高速度，可以通过查询表格或hash表来完成，然后在表格中搜索与另一条序列相匹配的、长度为ktup的片段。FASTA算法（一）552.在同一条对角线中临近的增强点成为一个增强段。每一个增强点都赋予一个正的分值，一个增强段中相邻的两个增强点之间的不匹配区域赋予一定的负值。一个增强段对应于一段相匹配的子序列，分值最高的段被标记为init1。FASTA算法（二）563.引入indel。把那些没有重叠(non-overlap)的增强段拼接起来(增强段的分值之和减去空位处罚)。分值最高的区域记为initn。FASTA算法（三）574.对最有可能的匹配序列进一步评分：以增强段init1所在的对角线为中心，划分出一个较狭窄的对角线带，利用S-W算法，来获得分值最高的局部比对，记作opt。FASTA算法（四）585.决定采用initn或opt的分值，前者敏感度低但速度快。FASTA对每一个检索到的比对都提供一个统计学显著性的评估，以判断该比对的意义。FASTA算法（五）59注意wFASTA对DNA序列搜索的结果要比对蛋白质序列搜索的结果更敏感。它对数据库的每一次搜索都只有一个最佳的比对，一些有意义的比对可能被错过。60两个保守区域的信息返回