Intro 最近在用 nodejs 写爬虫，之前的 nodejs 爬虫代码用 js 写的，感觉可维护性太差，也没有智能提示，于是把js改用ts(typescript)重写一下，提升代码质量。 爬虫启动之后不定期会出现验证码反爬虫，需要输入验证码才能继续，于是想在需要输入验证码时推送一个消息给用户，让用户输入验证码以继续爬虫的整个流程。我们平时用钉钉办公，钉钉群有个机器人，很方便于是就实现了一个通过钉钉的群机器人实现消息推送。 实现 代码是 ts...
MongoDB简介 MongoDB是一个开源的、文档型的NoSQL数据库程序。MongoDB将数据存储在类似JSON的文档中，操作起来更灵活方便。NoSQL数据库中的文档(documents)对应于SQL数据库中的一行。将一组文档组合在一起称为集合(collections)，它大致相当于关系数据库中的表。 除了作为一个NoSQL数据库，MongoDB还有一些自己的特性： ?易于安装和设置 ?使用BSON(类似于JSON的格式)来存储数据 ?将文档对象映射到应用程序代码很容易 ?具有高度可伸...
一,介绍与需求 1.1,介绍 1, officegen 模块可以为Microsoft Office 2007及更高版本生成Office Open XML文件。此模块不依赖于任何框架，您不需要安装Microsoft Office，因此您可以将它用于任何类型的 JavaScript 应用程序。输出也是流而不是文件，不依赖于任何输出工具。此模块应适用于支持Node.js 0.10或更高版本的任何环境，包括Linux，OSX和Windows。 2, textract 文本提取节点模块。 3, pdf2json 是一个节点。js模块解析和转换...
想使用nodejs（koa）搭建一个完整的前后端，完成数据的增删改查，又不想使用数据库，那使用json文件吧。本文介绍了基于koa的json文件的增、删、改、查。 代码准备 const Koa = require(koa) const bodyParser = require(koa-bodyparser) const Router = require(koa-router) const fs = require(fs) const path = require(path) const app = new Koa() const router = new Router() app.use(bodyParser()) // 路由 const deploy = ...
背景 项目中有用到node做中间层，期间有个为PDF文件添加水印的需求，网上搜了不少帖子，发现有以下几点存在的问题。1、单页PDF的话，可以用PNG图片加到PDF上，但是实际使用情况就没那么理想，必须满足多页PDF每页都加上水印的效果方可。2、中间想过，把PDF转成图片，图片加上水印后再转回PDF，但是感觉中间步骤太麻烦，而且会面临清晰度下降的可能。3、Python、Java有相关方案，可以实现，有想过用node去执行Python脚本去为PDF加水...
前颜（yan）雪碧图（CSS sprite ），就是把很多小图标合并为一张图片。 在Web开发中，使用雪碧图是优化Web性能的一种方法。 比如你可能遇到过这样的一种场景：在你的页面中，使用到了很多的小图标，然后你的每个小图标都是通过 <img src=logo.png>来引用的。 通过这种方式虽然比较方便，但是存在的一个缺点就是性能问题，即浏览器在解析每个小图标时，都要发起一次http或（https）请求，而这个小图标本身却很小，可能只有十几k甚至...
打开cmd创建即可 $ npm init Package name: (hello) //模块名字，npm init会自动取当前目录名作为默认名字，这里不需要改，直接确认即可 Description: A example for write a module //模块说明 Package version: (0.0.0) 0.0.1 //模块版本号，这个大家按自己习惯来定就可以 Project homepage: (none) //模块的主页，如果有的话可以填在这里，也可以不填 Project git repository: (none) //模块的git仓库，选填。npm的用户一般...
本文介绍了NodeJS服务器实现gzip压缩，分享给大家，具体如下：在浏览器向服务器请求静态资源时，服务器为了减小在网络传输过程中消耗的流量和时间，都是将静态资源经过压缩后返回给服务器的，实现压缩的算法有 deflate 和 gzip 等，最常用的是 gzip 压缩。 gzip 简介 在浏览器和服务器之间通过 gzip 压缩流实现传输的过程可以用下图表示。当浏览器向服务器请求静态资源，服务器会将静态资源经过处理转换为压缩流，大大减小文件体积...
使服务器支持范围请求，允许客户端只请求文档的一部分。其流程是： 客户端向服务端发起请求服务端响应，附上Accept-Ranges头（值表示表示范围的单位，通常是“bytes”），告诉客户端其接受范围请求客户端发送新的请求，附上Ranges头，告诉服务端请求的是一个范围服务端收到范围请求，分情况响应：范围有效，服务端返回206 Partial Content，发送指定范围内内容，并在Content-Range头中指定该范围范围无效，服务端返回416 Requested...
背景&概览 目前常见的图床服务都会有图片动态裁切的功能，主要的应用场景用以为各种终端和业务形态输出合适尺寸的图片。 一张动辄以 MB 为计量单位的原始大图，通常不会只设置一下显示尺寸就直接输出到终端中，因为体积太大加载体验会很差，除了影响加载速度还会增加终端设备的内存占用。所以要想在各种终端下都能保证图片质量的同时又确保输出合适的尺寸，那么此时就需要根据图片 URL 来对原始图片进行裁切，然后动态生成并输出一...
随着前端体积越来越大，功能越来越丰富，这时候就需要将前端工程化，而webpack就是用于将前端各种文件打包起来。一个简单的webpack应该包含以下几个概念入口起点输出配置组件加载器插件模块模块热替换适用情况 首先说明，此情况不具备普遍性。若你的情况与笔者类似那么希望这篇文章能够帮到你。 我的项目情况是这样的：用node.js做后台，ejs做模板引擎（即整个页面是一个ejs文件）由node.js将数据渲染完成后，再将完整页面返回给用...
什么是多语言？我们平时访问一些文档类型的网站时，经常可以看到页面右上角有一个下拉框用来选择当前页面支持的语言，并在选中后将整个网页的内容切换为选中的语言，这就是项目中的多语言，多语言可以根据浏览器请求发送的语言类型在服务器进行设置，也可以在请求服务器时返回多种语言，并根据权重和浏览器的支持情况进行选择和渲染。 功能描述在本文中我们通过客户端向服务器发送请求告诉服务器客户端所支持的语言及权重，服务器检...
前言这几天为了熟悉vue.js框架，还有webpack的使用，就准备搭建一个发布和浏览markdwon的简单WEB应用。原本是想着用bash脚本和busybox的httpd来作为后台服务，但是bash脚本解析和生成JSON非常不方便，而用Java语言写又觉得部署不方便，所以就想到了正在用到的Node.js，于是就有了这篇博文。（文末有本文代码的github地址） 简单例子首先，从搭建最简单的 Hello world 开始，建立以下目录、文件和内容。 建立项目及运行projectweb-s...
前段时间由于项目需求，得做excel和word的导出功能，excel的导出百度一下一大把，小伙伴们都写的好详细，基本打来改改就可以用，可导出word的功能，百度了貌似都找不到可用资料，哎，费解呀。后来找同事，同事们也没整过，看来还得自己上呀。。。 第一次发现原来百度Google这强大，同事推荐的 http://www.baigoogledu.com/ 百度Google一起摆 nodejs word 找到https://github.com/Ziv-Barber/officegen 看到这里您老是不就瞬间明...
一、Node中socket.io基础1、是什么Socket.IO类库，是在服务器和浏览器之间提供一个共享接口，其可以用于实现以下几种通信方式： HTML5中的WebSocket通信Flash中使用的WebSocket通信XHR轮询JSONP轮询Forever Iframe在通信时，客户端与服务器端可以使用相同的API2、怎么用原理：创建Scoket.IO服务器，该服务器依赖于一个已经创建的HTTP服务器 服务器端引入 var http=require(http) var sio=require(socket.io) var server=http.crea...