LINEAR LAYERS

Linear

Examples:

>>> m = nn.Linear(20, 30)

>>> input = torch.randn(128, 20)

>>> output = m(input)

>>> print(output.size())

torch.Size([128, 30])

查看源码后发现U指的是均匀分布，即weight权重（A的转置）是取自输入尺寸的倒数再开方后的正负值之间的均匀分布，同理可得偏置bias是输出尺寸
的倒数再开方后的正负值之间的均匀分布。


资料参考于官网：https://pytorch.org/docs/stable/nn.html#linear-layers


 










												


											
pytorch中的Linear Layer（线性层）的更多相关文章
	

    
								
  1. [转载]Pytorch中nn.Linear module的理解
		
    [转载]Pytorch中nn.Linear module的理解 本文转载并援引全文纯粹是为了构建和分类自己的知识,方便自己未来的查找,没啥其他意思. 这个模块要实现的公式是:y=xAT+*b 来源:h ...
    
		
    2. 
						
  2. Pytorch中RoI pooling layer的几种实现
		
    Faster-RCNN论文中在RoI-Head网络中,将128个RoI区域对应的feature map进行截取,而后利用RoI pooling层输出7*7大小的feature map.在pytorch ...
    
		
    3. 
						
  3. [PyTorch 学习笔记] 3.3 池化层、线性层和激活函数层
		
    本章代码:https://github.com/zhangxiann/PyTorch_Practice/blob/master/lesson3/nn_layers_others.py 这篇文章主要介绍 ...
    
		
    4. 
						
  4. pytorch 中的重要模块化接口nn.Module
		
    torch.nn 是专门为神经网络设计的模块化接口,nn构建于autgrad之上,可以用来定义和运行神经网络 nn.Module 是nn中重要的类,包含网络各层的定义,以及forward方法 对于自己 ...
    
		
    5. 
						
  5. 转pytorch中训练深度神经网络模型的关键知识点
		
    版权声明:本文为博主原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明. 本文链接:https://blog.csdn.net/weixin_42279044/articl ...
    
		
    6. 
						
  6. 详解Pytorch中的网络构造，模型save和load，.pth权重文件解析
		
    转载:https://zhuanlan.zhihu.com/p/53927068 https://blog.csdn.net/wangdongwei0/article/details/88956527 ...
    
		
    7. 
						
  7. PyTorch中使用深度学习（CNN和LSTM）的自动图像标题
		
    介绍 深度学习现在是一个非常猖獗的领域 - 有如此多的应用程序日复一日地出现.深入了解深度学习的最佳方法是亲自动手.尽可能多地参与项目,并尝试自己完成.这将帮助您更深入地掌握主题,并帮助您成为更好的深 ...
    
		
    8. 
						
  8. pytorch中的激励函数（详细版）
		
          初学神经网络和pytorch,这里参考大佬资料来总结一下有哪些激活函数和损失函数(pytorch表示)      首先pytorch初始化:   import torch import t ...
    
		
    9. 
						
  9. [PyTorch 学习笔记] 3.2 卷积层
		
    本章代码:https://github.com/zhangxiann/PyTorch_Practice/blob/master/lesson3/nn_layers_convolution.py 这篇文 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. Uva1395 POJ3522 Slim Span （最小生成树）
			
    Description Given an undirected weighted graph G, you should find one of spanning trees specified as ...
    
			
    2. 
						
  2. 2.2 IPython基础
			
    2.2 IPython基础 1 Running the IPython Shell (运行IPython Shell) 可以通过命令行启动IPython,就像启动标准的Python解释器一样,直接在t ...
    
			
    3. 
						
  3. PHP中对用户身份认证实现两种方法
			
    用户在设计和维护站点的时候,经常需要限制对某些重要文件或信息的访问.通常,我们可以采用内置于WEB服务器的基于HTTP协议的用户身份验证机制.     当访问者浏览受保护页面时,客户端浏览器会弹出对话 ...
    
			
    4. 
						
  4. jQuery文字“橡皮圈“特效
			
    <!DOCTYPE html> <html> <head> <meta charset="UTF-8"> <title> ...
    
			
    5. 
						
  5. Docker实战(十)之分布式处理与大数据平台
			
    分布式系统和大数据处理平台是目前业界关注的热门技术. 1.RabbitMQ RabbitMQ是一个支持AMQP的开源消息队列实现,由Erlang编写,因以高性能.高可用以及可伸缩性出名.它支持多种客户 ...
    
			
    6. 
						
  6. Android的JNI调用（三）
			
    注册JNI函数 注册之意就是将Java层的native函数与JNI层对应的实现函数关联起来,这样在调用Java层的native函数时,就能顺利转到JNI层对应的函数执行. (1)静态注册 根据函数名来 ...
    
			
    7. 
						
  7. sqlite学习笔记8：C语言中使用sqlite之创建表
			
    前面已经说了怎样打开和关闭数据库,这次要说得是怎样运行SQL语句,来创建一张表. 要用的的函数: sqlite3_exec(sqlite3* db, const char *sql, sqlite_c ...
    
			
    8. 
						
  8. 【VSC】.txt文件打开乱码
			
    我在拉取项目之后打开其备注文件查看,发现里面的中文乱码,在网上寻找解决方案自定义设置并没有什么作用. 回到文件目录用记事本打开,在里面随意输入中文,保存. 之后———— 恩,vscode中的该文本同步 ...
    
			
    9. 
						
  9. 解决 an app id with identifier is not available. please enter a different string. xcode 7.3
			
    百度上这帮人,真的服了,没有一个人能解决问题,最后在 stackoverflow 上找到解决方法 The Application ID Name should be same as applicati ...
    
			
    10. 
						
  10. Nivo Slider用法
			
    示例代码: <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF ...
    
			
    11.