PSSM特征-从生成到处理
以下代码均为个人原创,如有疑问,欢迎交流。新浪微博:拾毅者
本节内容:
- pssm生成
- pssm简化
- 标准的pssm构建
- 滑动pssm生成
在基于蛋白质序列的相关预測中。使用PSSM打分矩阵会得将预測效果大大提高,同一时候,假设使用滑动的PSSM,效果又会进一步提高。这里主要以分享代码为主,以下介绍下PSSM从生成到处理的全过程。
1.PSSM的生成
PSSM的生成有多种方式,这里使用的psiblast软件。ncbi-blast-2.2.28+/bin/psiblast。下载地址:http://blast.ncbi.nlm.nih.gov/Blast.cgi?CMD=Web&PAGE_TYPE=BlastNews#1 用法。输入一个序列,加上相关參数,直接输出PSSM文件
代码
#一个命令函数,依据pdb文件。使用blast生成pssm文件
def command_pssm(content, output_file,pssm_file):
os.system('/ifs/share/lib/blast/ncbi-blast-2.2.28+/bin/psiblast \
-query %s \
-db /ifs/data/database/blast_data/nr \
-num_iterations 3 \
-out %s \
-out_ascii_pssm %s &' %(content, output_file,pssm_file))
上面是运行的命令,封装成函数,以下为实际代码:
#对每一个序列进行PSSM打分
def pssm(proseq,outdir):
inputfile = open(proseq,'r')
content = ''
input_file = ''
output_file = ''
pssm_file = ''
chain_name = []
for eachline in inputfile:
if '>' in eachline:
if len(content):
temp_file = open(outdir + '/fasta/' + chain_name,'w')
temp_file.write(content)
input_file = outdir + '/fasta/' + chain_name
output_file = outdir + '/' + chain_name + '.out'
pssm_file = outdir + '/' + chain_name + '.pssm'
command_pssm(input_file, output_file,pssm_file)
temp_file.close
content = ''
chain_name = eachline[1:5] + eachline[6:7]
content += ''.join(eachline)
#print content
#print chain_name
if len(content):
temp_file = open(outdir + '/fasta/' + chain_name,'w')
temp_file.write(content)
input_file = outdir + '/fasta/' + chain_name
output_file = outdir + '/' + chain_name + '.out'
pssm_file = outdir + '/' + chain_name + '.pssm'
command_pssm(input_file, output_file,pssm_file)
temp_file.close
inputfile.close()
測试用例:
'''
#生成pssm文件,迭代次数为3
proseq = '/ifs/home/liudiwei/experiment/step2/data/protein.seq'
outdir = '/ifs/home/liudiwei/experiment/step2/pssm'
pssm(proseq,outdir)
'''
PSSM输出例子:
2.简化PSSM数据
通常我们须要的仅仅是前面的20列
以下通过代码来实现上面的功能:
#格式化pssm每行数据
def formateachline(eachline):
col = eachline[0:5].strip()
col += '\t' + eachline[5:8].strip()
begin = 9
end = begin +3
for i in range(20):
begin = begin
end = begin + 3
col += '\t' + eachline[begin:end].strip()
begin = end
col += '\n'
return col
简化pssm。仅仅要得到前面的20个氨基酸的打分值
def simplifypssm(pssmdir,newdir):
listfile = os.listdir(pssmdir)
for eachfile in listfile:
with open(pssmdir + '/' + eachfile,'r') as inputpssm:
with open(newdir + '/' + eachfile,'w') as outfile:
count = 0
for eachline in inputpssm:
count +=1
if count <= 3:
continue
if not len(eachline.strip()):
break
oneline = formateachline(eachline)
outfile.write(''.join(oneline))
''' Test example
pssmdir = '/ifs/home/liudiwei/experiment/step2/pssm/oldpssm'
newdir = '/ifs/home/liudiwei/experiment/step2/pssm/newpssm'
simplifypssm(pssmdir, newdir)
'''
3.得到标准的PSSM
通过上面抽取出来的PSSM,以下通过代码来获得一个滑动的PSSM
#标准的pssm,直接依据标准的pssm滑动
def standardPSSM(window_size,pssmdir,outdir):
listfile = os.listdir(pssmdir)
for eachfile in listfile:
outfile = open(outdir + '/' + eachfile, 'w')
with open(pssmdir + '/' + eachfile, 'r') as inputf:
inputfile = inputf.readlines()
for linenum in range(len(inputfile)):
content = []
first = [];second = [];third=[];last=[]
if linenum < window_size/2:
for i in range((window_size/2 - linenum)*20):
second.append('\t0')
if window_size/2 - linenum > 0:
countline = window_size - (window_size/2 - linenum)
else:
countline = window_size #get needed line count
linetemp = 0
for eachline in inputfile:
if linetemp < linenum-window_size/2:
linetemp += 1
continue
if linetemp == linenum:
thisline = eachline.split('\t')
for j in range(0,2):
if j>0:
first.append('\t')
first.append(thisline[j].strip())
if countline > 0:
oneline = eachline.split('\t')
for j in range(2,len(oneline)):
third.append('\t' + oneline[j].strip())
countline -=1
else:
break
linetemp += 1
while countline:
for i in range(20):
last.append('\t0')
countline -=1
content += first + second + third + last
outfile.write(''.join(content) + '\n')
outfile.close()
'''Test example
pssmdir = '/ifs/home/liudiwei/experiment/step2/pssm/newpssm'
newdir = '/ifs/home/liudiwei/experiment/step2/pssm/standardpssm'
window_size = 5
standardPSSM(window_size,pssmdir, newdir)
'''
4.依据滑动窗体求出滑动的PSSM
#依据窗体大小,计算出滑动后的20个氨基酸打分值
def computedPSSM(window_size,pssmdir,outdir):
listfile = os.listdir(pssmdir)
for eachfile in listfile:
outfile = open(outdir + '/' + eachfile, 'w')
with open(pssmdir + '/' + eachfile, 'r') as inputf:
inputfile = inputf.readlines()
for linenum in range(len(inputfile)):
content = []
first = [];second = []
if window_size/2 - linenum > 0:
countline = window_size - (window_size/2 - linenum)
else:
countline = window_size #get needed line count
linetemp = 0
for eachline in inputfile:
if linetemp < linenum-window_size/2:
linetemp += 1
continue
if linetemp == linenum:
thisline = eachline.split('\t')
for j in range(0,2):
if j>0:first.append('\t')
first.append(thisline[j].strip())
if countline > 0:
oneline = eachline.split('\t')[2:len(eachline)]
tline = []
for i in range(len(oneline)):
tline.append(int(oneline[i]))
if len(second)==0:
second += tline
else:
second = list(map(lambda x: x[0]+x[1], zip(second, tline)))
countline -=1
else:
break
linetemp += 1
format_second = []
for i in range(len(second)):
format_second.append('\t' + str(second[i]))
content += first + format_second
outfile.write(''.join(content) + '\n')
outfile.close()
'''
pssmdir = '/ifs/home/liudiwei/experiment/step2/pssm/newpssm'
newdir = '/ifs/home/liudiwei/experiment/step2/pssm/computedpssm'
window_size = 5
computedPSSM(window_size,pssmdir, newdir)
'''
平滑的PSSM,仅仅是pssmdir不同,直接调用standardPSSM函数
def smoothedPSSM(window_size,pssmdir,outdir):
standardPSSM(window_size,pssmdir, outdir)
'''Test example
pssmdir = '/ifs/home/liudiwei/experiment/step2/pssm/computedpssm'
newdir = '/ifs/home/liudiwei/experiment/step2/pssm/smoothedpssm'
window_size = 5
smoothedPSSM(window_size,pssmdir,newdir)
'''
最后得到的是一个滑动的PSSM矩阵,特征的维数随窗体的大小逐渐增减。
本栏目python代码分享持续更新中,欢迎关注:Dream_Angel_Z博客 新浪微博:拾毅者
PSSM特征-从生成到处理的更多相关文章
- iOS二维码生成、识别、扫描等
二维码扫描 前言: 最近的项目中使用到了二维码,二维码这个模块功能也完成:觉得还是有必要总结一下用来做记录.好长时间没有写二维码了都忘记在差不多了,重新拾起来还是挻快的. 二维码使用场景: 生活中有很 ...
- weka数据挖掘拾遗(三)----再谈如果何生成arff
前一阵子写过一个arff的随笔,但是写完后发现有些啰嗦.其实如果使用weka自带的api,生成arff文件将变成一件很简单的事儿. 首先,可以先把特征文件生成csv格式的.csv格式就是每列数据都用逗 ...
- NLP+VS=>Image Caption︱自动生成图像标题技术论文+相关项目
读聪明人的笔记,是不是也能变聪明呢? Image Caption是一个融合计算机视觉.自然语言处理和机器学习的综合问题,它类似于翻译一副图片为一段描述文字. Image Caption问题可以定义为二 ...
- 条件随机场之CRF++源码详解-特征
我在学习条件随机场的时候经常有这样的疑问,crf预测当前节点label如何利用其他节点的信息.crf的训练样本与其他的分类器有什么不同.crf的公式中特征函数是什么以及这些特征函数是如何表示的.在这一 ...
- 『计算机视觉』Mask-RCNN_推断网络其三:RPN锚框处理和Proposal生成
一.RPN锚框信息生成 上文的最后,我们生成了用于计算锚框信息的特征(源代码在inference模式中不进行锚框生成,而是外部生成好feed进网络,training模式下在向前传播时直接生成锚框,不过 ...
- weka数据挖掘拾遗(一)---- 生成Arff格式文件
一.什么是arff格式文件 1.arff是Attribute-Relation File Format缩写,从英文字面也能大概看出什么意思.它是weka数据挖掘开源程序使用的一种文件模式.由于weka ...
- SENet(Squeeze-and-Excitation Networks)算法笔记---通过学习的方式来自动获取到每个特征通道的重要程度,然后依照这个重要程度去提升有用的特征并抑制对当前任务用处不大的特征
Momenta详解ImageNet 2017夺冠架构SENet 转自机器之心专栏 作者:胡杰 本届 CVPR 2017大会上出现了很多值得关注的精彩论文,国内自动驾驶创业公司 Momenta 联合机器 ...
- pytorch实现yolov3(2) 配置文件解析及各layer生成
配置文件 配置文件yolov3.cfg定义了网络的结构 .... [convolutional] batch_normalize=1 filters=64 size=3 stride=2 pad=1 ...
- [转]java生成 excel 并导出文件
原文:https://blog.csdn.net/xunwei0303/article/details/53213130 目前,比较常用的实现Java导入.导出Excel的技术有两种Jakarta P ...
随机推荐
- virtualbox centos6.6 minimal 与宿主机win7共享文件夹
1.virtualbox, 设置-共享文件夹,设置好共享文件夹win7dir 2.centos 创建文件夹比如share 3.mount -t vboxsf win7dir /root/share 4 ...
- 牛客网 暑期ACM多校训练营(第一场)J.Different Integers-区间两侧不同数字的个数-离线树状数组 or 可持久化线段树(主席树)
J.Different Integers 题意就是给你l,r,问你在区间两侧的[1,l]和[r,n]中,不同数的个数. 两种思路: 1.将数组长度扩大两倍,for(int i=n+1;i<=2* ...
- Python的网络编程[1] -> FTP 协议[2] -> 使用 ftplib 建立 FTP 客户端
使用 ftplib 建立 FTP 客户端 用于建立FTP Client,与 pyftplib 建立的 Server 进行通信. 快速导航 1. 模块信息 2. 建立 FTP 客户端 1. 模块信息 1 ...
- HDU 3237 Tree(树链剖分)(线段树区间取反,最大值)
Tree Time Limit: 5000MS Memory Limit: 131072K Total Submissions: 9123 Accepted: 2411 Description ...
- 路由器漏洞利用工具RouterSploit
路由器漏洞利用工具RouterSploit 网络中存在大量的嵌入式设备,如路由器.智能摄像头.这类设备安全防护程度较低.由于这些设备更新不方便,一旦发现漏洞,往往不能及时修复.所以,在网络渗透测试中 ...
- 八. 输入输出(IO)操作1.输入输出基本概念
输入输出(I/O)是指程序与外部设备或其他计算机进行交互的操作.几乎所有的程序都具有输入与输出操作,如从键盘上读取数据,从本地或网络上的文件读取数据或写入数据等.通过输入和输出操作可以从外界接收信息, ...
- 四. Java继承和多态6. 多态对象的类型转换
这里所说的对象类型转换,是指存在继承关系的对象,不是任意类型的对象.当对不存在继承关系的对象进行强制类型转换时,java 运行时将抛出 java.lang.ClassCastException 异常. ...
- [BZOJ1194][HNOI2006][强连通分量Tarjan+dfs]潘多拉的盒子
[BZOJ1194][HNOI2006]潘多拉的盒子 Input 第一行是一个正整数S,表示宝盒上咒语机的个数,(1≤S≤50).文件以下分为S块,每一块描述一个咒语机,按照咒语机0,咒语机1„„咒语 ...
- centos下crontab的使用
1.作用 使用crontab命令可以修改crontab配置文件,然后该配置由cron公用程序在适当的时间执行,该命令使用权限是所有用户. 2.格式 crontab [-u user] {-l | -r ...
- C语言中<CR>是什么意思
在文本处理中, CR, LF, CR/LF是不同操作系统上使用的换行符.Dos和windows采用回车+换行CR/LF表示下一行, 而UNIX/Linux采用换行符LF表示下一行,苹果机(MAC OS ...