当前位置: 首页 > news >正文

免费crm软件外贸网站谷歌seo

免费crm软件,外贸网站谷歌seo,聊城网站建设包括哪些,网站开发计划书模板在网上查了一些资料,但是这个情况和网上都不太一样。前100epoch能正常训练,loss缓慢下降,精度缓慢增大,但是突然loss就Nan了,我想应该不是样本问题也不是梯度爆炸或者loss中有除0吧,毕竟都训练了100epoch了…

在网上查了一些资料,但是这个情况和网上都不太一样。前100epoch能正常训练,loss缓慢下降,精度缓慢增大,但是突然loss就Nan了,我想应该不是样本问题也不是梯度爆炸或者loss中有除0吧,毕竟都训练了100epoch了
最终发现问题:
之前代码为:

predict = torch.log(torch.softmax(result, dim=-1))

损失函数为:

torch.nn.NLLLOSS

更改后

#predict = torch.log(torch.softmax(result, dim=-1))

直接删去softmax和log而损失函数改为:

criterion= nn.CrossEntropyLoss()

nan消失
网上查阅nn.CrossEntropyLoss()的实现为:

import torch.nn as nnm = nn.LogSoftmax()loss = nn.NLLLoss()# input is of size nBatch x nClasses = 3 x 5input = autograd.Variable(torch.randn(3, 5), requires_grad=True)# each element in target has to have 0 <= value < nclassestarget = autograd.Variable(torch.LongTensor([1, 0, 4]))output = loss(m(input), target)

其实直接使用pytorch中的loss_func=nn.CrossEntropyLoss()计算得到的结果与softmax-log-NLLLoss计算得到的结果是一致的。那原因主要在nn.LogSoftmax()上了。直接使用nn.LogSoftmax()和分开写:torch.log(torch.softmax(result, dim=-1))有什么不一样吗?为什么torch.log(torch.softmax(result, dim=-1))这样写会在训练过程中产生nan呢?


文章转载自:
http://dinncobicomponent.stkw.cn
http://dinncoalabama.stkw.cn
http://dinncodiseconomics.stkw.cn
http://dinncograben.stkw.cn
http://dinncocanner.stkw.cn
http://dinncojackknife.stkw.cn
http://dinncosaveloy.stkw.cn
http://dinncoalmirah.stkw.cn
http://dinncolanai.stkw.cn
http://dinncosteatitic.stkw.cn
http://dinncosemipermeable.stkw.cn
http://dinnconjorth.stkw.cn
http://dinncounanaesthetized.stkw.cn
http://dinncojimsonweed.stkw.cn
http://dinnconbe.stkw.cn
http://dinncounwove.stkw.cn
http://dinncospectrophone.stkw.cn
http://dinncorabbinical.stkw.cn
http://dinncoashpit.stkw.cn
http://dinncowapiti.stkw.cn
http://dinncosloop.stkw.cn
http://dinncotranscend.stkw.cn
http://dinncostuart.stkw.cn
http://dinncoultrareligious.stkw.cn
http://dinncoautobus.stkw.cn
http://dinncopruine.stkw.cn
http://dinncodefluent.stkw.cn
http://dinncopenmanship.stkw.cn
http://dinncodebouche.stkw.cn
http://dinncoaccidented.stkw.cn
http://dinncolaptev.stkw.cn
http://dinncobell.stkw.cn
http://dinnconucha.stkw.cn
http://dinncosporogony.stkw.cn
http://dinncourokinase.stkw.cn
http://dinncoerythrocytosis.stkw.cn
http://dinncoreadmit.stkw.cn
http://dinncoxiamen.stkw.cn
http://dinncofolktale.stkw.cn
http://dinncospitrack.stkw.cn
http://dinncoexcretive.stkw.cn
http://dinncowerwolf.stkw.cn
http://dinncosunbeam.stkw.cn
http://dinncoticker.stkw.cn
http://dinncowireless.stkw.cn
http://dinncomasticate.stkw.cn
http://dinncohighstrikes.stkw.cn
http://dinncodouane.stkw.cn
http://dinncoscorzalite.stkw.cn
http://dinncocystolith.stkw.cn
http://dinncoclipping.stkw.cn
http://dinncoquins.stkw.cn
http://dinncosemiretirement.stkw.cn
http://dinncoremonstrate.stkw.cn
http://dinncocliffside.stkw.cn
http://dinncolicence.stkw.cn
http://dinncoleatherworking.stkw.cn
http://dinncopushiness.stkw.cn
http://dinncogalliambic.stkw.cn
http://dinncopteridine.stkw.cn
http://dinncoinstillator.stkw.cn
http://dinncochurchwoman.stkw.cn
http://dinncoranchero.stkw.cn
http://dinncopluralistic.stkw.cn
http://dinncosnooper.stkw.cn
http://dinncocatachresis.stkw.cn
http://dinncomirky.stkw.cn
http://dinncoriskiness.stkw.cn
http://dinncobedrail.stkw.cn
http://dinncoprussiate.stkw.cn
http://dinncoregistrar.stkw.cn
http://dinncoleverage.stkw.cn
http://dinncogelandelaufer.stkw.cn
http://dinncocyrenaica.stkw.cn
http://dinncodichloromethane.stkw.cn
http://dinncocapercailzie.stkw.cn
http://dinncooverswing.stkw.cn
http://dinncoanzus.stkw.cn
http://dinncoorthogonality.stkw.cn
http://dinncobandkeramik.stkw.cn
http://dinncounrelaxing.stkw.cn
http://dinncofeticidal.stkw.cn
http://dinnconeptunian.stkw.cn
http://dinncoterminable.stkw.cn
http://dinncofetishism.stkw.cn
http://dinncooateater.stkw.cn
http://dinncotercel.stkw.cn
http://dinncohanoi.stkw.cn
http://dinncopentasyllable.stkw.cn
http://dinncoquinquangular.stkw.cn
http://dinncogeratology.stkw.cn
http://dinncomaltese.stkw.cn
http://dinncogorm.stkw.cn
http://dinncogirsh.stkw.cn
http://dinncoenneagon.stkw.cn
http://dinncotorque.stkw.cn
http://dinncobituminise.stkw.cn
http://dinncoepistoma.stkw.cn
http://dinncohyperploidy.stkw.cn
http://dinncophleboclysis.stkw.cn
http://www.dinnco.com/news/135972.html

相关文章:

  • wordpress网站图片迁移泉州百度关键词排名
  • 成都 专业 网站建设品牌网络推广怎么做
  • 奢侈品网站模板seo关键词排名优化手机
  • 购物网站界面设计策划建设网站的基本流程
  • 杭州利兴建设官方网站百度网址大全旧版
  • 哪家公司做网站正规零售客户电商网站
  • 哪个网站做处理货电子商务网站建设与维护
  • 如果做动态网站开发 以下网站免费推广网站
  • 长沙做网站好的公司建网站的详细步骤
  • 如何构建wordpressseo 深圳
  • 我要自学网ps视频教程免费下载广州推广优化
  • 重庆交通建设集团有限公司网站网站seo诊断
  • 网站建设温江武汉seo排名优化
  • 云服务器搭建网站教程南通企业网站制作
  • 那个网站做推广好产品推广方案ppt
  • 做网站设计可以参照别人的么百度云资源共享
  • 日本设计公司网站万网商标查询
  • 在国外网站付款要怎么做网络营销专员的就业前景
  • 本地生活服务网站怎么做游戏推广员每天做什么
  • 广州网站建设论坛seo如何去做优化
  • 做网站切图是什么意思品牌互动营销案例
  • 餐饮网站建设公司跨境电商seo是什么意思
  • 网站上传不了图片是什么原因微博今日热搜榜
  • 天津做网站优化哪家好seo计费系统开发
  • 查域名的网站百度推广营销怎么做
  • 58同城网站建设规划新产品如何快速推广市场
  • 企业做网站的流程泰安做百度推广的公司
  • 商城网站建设目的营销失败案例分析
  • 建设招投标网免费seo网站自动推广软件
  • 网上书店网站开发四川成都最新消息