置顶 2018-12-1122:07:40 Snoopy_Dream 阅读数1332更多分类专栏： 计算机视觉 pytorch 深度学习tricks 版权声明：本文为博主原创文章，遵循 CC4.0BY-SA 版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/e01528/article/details/84961432论文地址：https://arxiv.org/pdf/1812.01187.pdf更多方法和代码可见：图像分类任务中的tricks总结                   更多更全的tricks补充（补充链接也是福利满满~）目录2训练过程（baseline复现原文精度，作为下面的基础）3高效训练（大BS为出发，但部分小BS也适用）（效率改进）3.1大批...

2018年04月23日19:29:57 BIT_666 阅读数2968更多分类专栏： 机器学习 机器学习数学原理 西瓜书 版权声明：本文为博主原创文章，遵循 CC4.0BY-SA 版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/BIT_666/article/details/800517371.结构风险与经验风险在支持向量机部分，我们接触到松弛变量，正则化因子以及最优化函数，在朴素贝叶斯分类，决策树我们也遇到类似的函数优化问题。其实这就是结构风险和经验风险两种模型选择策略，经验风险负责最小化误差，使得模型尽可能的拟合数据，而结构风险则负责规则化参数，使得参数的形式尽量简洁，从而达到防止过拟合的作用.所以针对常见模型，我们都有下式：                   &nb...

 2017年05月21日13:54:31 LiuSpark 阅读数6821更多分类专栏： 机器学习 版权声明：本文为博主原创文章，遵循 CC4.0BY-SA 版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/SPARKKKK/article/details/72598041大部分内容来源于李宏毅的课程[1]先给一个直观的例子，这个是在我们训练GAN的时候经常出现的 这就是所谓的ModeCollapse但是实际中ModeCollapse不能像这个一样这么容易被发现(sample中出现完全一模一样的图片)例如训练集有很多种类别(如猫狗牛羊)，但是我们只能生成狗(或猫或牛或羊)，虽然生成的狗的图片质量特别好，但是！整个G就只能生成狗，根本没法生成猫牛羊，陷入一种训练结果不好的状态。这和我们对GAN的预期是相悖的。如上图。PdataPdata是八个高斯分布的点，也就是8个mode。 我们希望给定一个随机高斯分布（中间列中的最左图），我们希望这一个随机高斯分布经...

2019年05月29日01:07:50 糖葫芦君 阅读数455更多分类专栏： 算法 深度学习 版权声明：本文为博主原创文章，遵循 CC4.0BY-SA 版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/yinyu19950811/article/details/90476956 文章目录优化方法概述1.整体框架1.1SGD1.2Momentum1.2.1理解指数加权平均1.2.2偏差修正1.3AdaGrad1.4Nesterov1.5AdaDelta/RMSProp1.6Adam(AdaptiVeMomentEstimation)1.7Adam的改进1.7.1Adamw1.7.2LazyAdam1.7.3Madam2.到底是用Adam还是用SGD2.1Adam的罪状2.2AdaBound2.3到底该用Adam还是SGD？3.优化算法的常用tricks学习率衰减 模型优化方法的选择直接关系到最终模型的性能。有时候效果不好，未必是特征的问题或者模型设计的问...

2018年12月03日00:03:07 RRZS 阅读数153更多分类专栏： 深度学习 cv 版权声明：本文为博主原创文章，遵循 CC4.0BY-SA 版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/beyondjv610/article/details/84722476这篇文章的贡献点在于提出了一种新的正则化方法，并证明了其相比于其他的正则化方法具有更好的效果（测试集误差更低以及训练误差和测试误差之间的gap更小），之后的gan网络很多都沿用了这个正则化的方法，也验证了该方法的有效性。一、SpectralNormRegularization1.1谱范数的提出 首先，作者提出了衡量扰动的计算公式：该公式衡量当x发生一定程度变化时，y变化的大小。根据上述公式我们定义了谱范数，对于一个矩阵A根据数学推导可以得出，A的谱范数等于其最大的特征值【1】。我们希望Y函数尽可能的平滑就需要约束A的谱范数尽可能地小。在神经网络中，上述A就是对应Y=WX+b中的W，其中这个W是...

 WebGIS系列：搭建简易WebGIS网站：使用GeoServer+PostgreSQL+PostGIS+OpenLayers3使用GeoServer+QGIS发布WMTS服务使用GeoServer+OpenLayers发布和调用WMTS、VectorTile矢量切片服务Leaflet入门：添加点线面并导入GeoJSON数据 1        服务器搭建使用Tomcat需要先安装Java。从Oracle官方网站下载Java最新版本：http://www.oracle.com/technetwork/java/javase/downloads/index.html安装完成Java后，需要配置环境变量。具体方法请自行百度。安装成功后可以下载服务器了。从Tomcat官方网站下载最新的版本，在Windows10系统下解压缩即可使用：http://tomcat.apache.org/在bin目录下打开startup.bat，略等片刻，在浏览器中输入localhost:8080，出现Tomcat网...

欢迎阅读Flask文档。本文档分为几个部分。我推荐您先从安装开始，之后再浏览快速入门章节。教程比快速入门更详细地介绍了如何用Flask创建一个完整的应用（虽然很小）。想要深入了解Flask内部细节，请查阅API文档。Flask代码模式章节介绍了一些常见模式。Flask依赖两个外部库：Jinja2模板引擎和WerkzeugWSGI工具集。此文档不包含这两个库的文档。要细读它们的文档，请点击下面的链接：Jinja2文档Werkzeug文档这部分文档很枯燥，以介绍Flask的背景开始，然后注重说明Flask的Web开发的各个步骤。前言“微”是什么意思？配置与惯例与Flask共成长给有经验程序员的前言Flask中的线程局部变量Web开发危机四伏Python3的状态安装virtualenv全局安装活在边缘Windows下的pip和distribute快速入门一个最小的应用调试模式路由静态文件模板渲染访问请求数据重定向和错误关于响应会话消息闪现日志记录整合WSGI中间件部署到Web服务器教程介绍Flaskr步骤0:创建文件夹步骤1:数据库模式步骤2:应用设置代码步骤3:数据...

AcuratedlistofawesomeFlaskresourcesandpluginsAwesomeFlaskFrameworkAdmininterfaceAuthenticationAuthorizationDatabaseDatabaseMigrationsSessionCacheDataValidationEmaili18nFull-textsearchingRateLimitingTaskQueueExceptiontrackingTracingAPMOtherSDKFrontendDevelopment(Debugging/Testing/Documentation)UtilsResourcesTutorialsCoursesBooksSlidesVideosBuiltwithFlaskBoilerplateConnexion -Swagger/OpenAPIFirstframeworkforPythonontopofFlaskwithautomaticendpointvalidationandOAuth2supportFlask-MongoRest ...

探索Flask 是一本关于使用 Flask 开发Web应用程序的最佳实践和模式的书籍。这本书是由426名赞助人 在Kickstarter上 于2013年7月资助的。我最终发布了这本书，在花费了将近一年的努力。我讨厌管理发布以及使用付费来限制书籍的读众。我没有通过写一本书来获取商业利益，我写这本书是为了把一些有用的东西放在这里并且帮助Flask社区成长。在2014年6月份，完成这本书后不久，我重新编辑了web版本并且免费发布在这里。不需要付费或者捐献或者任何其它要求。好好享受！我的名字叫做RobertPicard。我是MatasanoSecurity的一名安全顾问并且也是一个Flask爱好者。我喜欢Flask的简洁性，相对来说像Django框架给用户准备所有的东西，这种模式适用于许多的人，但是并不适用我。如果你想要联系我，请直接发送邮件到 robert@robert.io。如果你对本书有反馈意见的话，请反馈到 GitHubrepository 上。前言假设动态文件本书使用的约定彩蛋摘要编码约定让我们来个PEP...

 Flask中文手册0.10文档 欢迎阅读Flask文档。本文档分为几个部分。我推荐您先从 安装 开始，之后再浏览 快速入门 章节。 教程 比快速入门更详细地介绍了如何用Flask创建一个完整的应用（虽然很小）。想要深入了解Flask内部细节，请查阅 API 文档。 Flask代码模式 章节介绍了一些常见模式。Flask依赖两个外部库： Jinja2 模板引擎和 Werkzeug WSGI工具集。此文档不包含这两个库的文档。要细读它们的文档，请点击下面的链接：Jinja2文档Werkzeug文档这部分文档很枯燥，以介绍Flask的背景开始，然后注重说明Flask的Web开发的各个步骤。前言“微”是什么意思？配置与惯例与Flask共成长给有经验程序员的前言Flask中的线程局部变量Web开发危机四伏Python3的状态安装virtualenv全局安装活在边缘Windows下的 pip 和...

好消息 我们获得了 ACMMultimedia(MM) 年度最佳开源软件奖。TensorLayer是为研究人员和工程师设计的一款基于GoogleTensorFlow开发的深度学习与强化学习库。它提供高级别的（Higher-Level）深度学习API，这样不仅可以加快研究人员的实验速度，也能够减少工程师在实际开发当中的重复工作。TensorLayer非常易于修改和扩展，这使它可以同时用于机器学习的研究与应用。此外，TensorLayer提供了大量示例和教程来帮助初学者理解深度学习，并提供大量的官方例子程序方便开发者快速找到适合自己项目的例子。更多细节请点击 这里。这篇文档不仅仅是为了描述如何使用这个库也是一个遍历不同类型的神经网络，深度强化学习和自然语言处理等内容的教程。此外，TensorLayer的Tutorial包含了所有TensorFlow官方深度学习教程的模块化实现，因此你可以对照TensorFlow深度学习教程来学习 [英文] [极客学院中文翻译]注解我们建议你在 Github 上star和watc...

核心原理： 该项目核心就是文件分块上传。前后端要高度配合，需要双方约定好一些数据，才能完成大文件分块，我们在项目中要重点解决的以下问题。* 如何分片；* 如何合成一个文件；* 中断了从哪个分片开始。如何分，利用强大的js库，来减轻我们的工作，市场上已经能有关于大文件分块的轮子，虽然程序员的天性曾迫使我重新造轮子。但是因为时间的关系还有工作的关系，我只能罢休了。最后我选择了百度的WebUploader来实现前端所需。如何合，在合之前，我们还得先解决一个问题，我们如何区分分块所属那个文件的。刚开始的时候，我是采用了前端生成了唯一uuid来做文件的标志，在每个分片请求上带上。不过后来在做秒传的时候我放弃了，采用了Md5来维护分块和文件关系。在服务端合并文件，和记录分块的问题，在这方面其实行业已经给了很好的解决方案了。参考迅雷，你会发现，每次下载中的时候，都会有两个文件，一个文件主体，另外一个就是文件临时文件，临时文件存储着每个分块对应字节位的状态。这些都是需要前后端密切联系才能做好，前端需要根据固定大小对文件进行分片，并且请求中要带上分片序号和大小。前...

一、概述 所谓断点续传，其实只是指下载，也就是要从文件已经下载的地方开始继续下载。在以前版本的HTTP协议是不支持断点的，HTTP/1.1开始就支持了。一般断点下载时才用到Range和Content-Range实体头。HTTP协议本身不支持断点上传，需要自己实现。 二、Range  用于请求头中，指定第一个字节的位置和最后一个字节的位置，一般格式：   Range:用于客户端到服务端的请求，可以通过改字段指定下载文件的某一段大小及其单位，字节偏移从0开始。典型格式：  Ranges:  (unit=firstbytepos)-[lastbytepos]   Ranges:   bytes=4000-下载从第4000字节开始到文件结束部分   Ranges:   bytes=0~N下载第0-N字节范围的内容   Ranges:&nb...

1.使用PHP的创始人RasmusLerdorf写的APC扩展模块来实现（http://pecl.php.net/package/apc）APC实现方法：安装APC，参照官方文档安装，可以使用PECL模块安装方法快速简捷，这里不说明配置php.ini，设置参数apc.rfc1867=1，使APC支持上传进度条功能，在APC源码说明文档里面有说明代码范例：大文件（50G）上传的实现细节： 服务端接收文件数据的处理逻辑代码： 2.使用PECL扩展模块uploadprogress实现（http://pecl.php.net/package/uploadprogress）uploadprogress 模块实现方法：使用PECL模块安装方法安装该模块php.ini里面设置uploadprogress.file.filename_template=“/tmp/upd_%s.txt”代码范例：进度的处理逻辑比较简单，只是更新数据库中的数据就行了。不需要做其它的处理。客户端代码如下：服务端代码如下： 实现后的效果：强大的文件夹上传，能够轻...

前言：因自己负责的项目(jetty内嵌启动的SpringMvc)中需要实现文件上传，而自己对java文件上传这一块未接触过，且对Http协议较模糊，故这次采用渐进的方式来学习文件上传的原理与实践。该博客重在实践。 一.Http协议原理简介     HTTP是一个属于应用层的面向对象的协议，由于其简捷、快速的方式，适用于分布式超媒体信息系统。它于1990年提出，经过几年的使用与发展，得到不断地完善和扩展。目前在WWW中使用的是HTTP/1.0的第六版，HTTP/1.1的规范化工作正在进行之中，而且HTTP-NG(NextGenerationofHTTP)的建议已经提出。    简单来说，就是一个基于应用层的通信规范：双方要进行通信，大家都要遵守一个规范，这个规范就是HTTP协议。 1.特点：  (1)支持客户/服务器模式。  (2)简单快速：客户向服务器请求服务时，只需传送请求方法和路径。请求方法常用的有GET、HEAD、POST。每种方法...