下载：https://pan.baidu.com/s/12-s95JrHek82tLRk3UQO_w更多分享资料：https://www.cnblogs.com/javapythonstudy/《深度学习与计算机视觉 算法原理、框架应用》PDF，带书签，347页。《大数据架构详解：从数据获取到深度学习》PDF，带书签，373页。配套源代码。《深度学习与计算机视觉 算法原理、框架应用》全书共13章，分为2篇，第1篇基础知识，第2篇实例精讲。用通俗易懂的文字表达公式背后的原理，实例部分提供了一些工具，很实...
第九章 推荐系统算法详解9.1 常用推荐算法分类9.1.1 基于人口统计学的推荐与用户画像9.1.2 基于内容的推荐与特征方程9.1.3 基于协同过滤的推荐第九章 推荐系统算法详解9.1 常用推荐算法分类9.1.1 基于人口统计学的推荐与用户画像9.1.2 基于内容的推荐与特征方程特征按照不同的数据类型分类，有不同的特征处理方法推荐系统常见反馈数据基于 UGC 的推荐TF-IDF算法代码示例9.1.3 基于协同过滤的推荐基于近邻的协同过滤的推荐基于模型的...
周期执行的任务一般由cron这个守护进程来处理[ps -ef|grep cron]。cron读取一个或多个配置文件，这些配置文件中包含了命令行及其调用时间。cron的配置文件称为“crontab”，是“cron table”的简写。 一、cron服务 cron是一个linux下 的定时执行工具，可以在无需人工干预的情况下运行作业。 service crond start //启动服务 service crond stop //关闭服务 service crond restart //重启服务 service crond...
一、kafka常用命令1.创建topicbin/kafka-topics.sh --create --topic topic_1 --partitions 4 --replication-factor 2 --zookeeper mini1:2181// 如果配置了PATH可以省略相关命令路径，相关命令参数暂不深入，字面意思也可以大概推断。后续给出完整参数参考。2.查看所有topicbin/kafka-topics.sh --list --zookeeper mini1:21813.发送消息bin/kafka-console-producer.sh --broker-list mini1:9092 --topic topic_14.消费消息bin/k...
String数据结构的基本操作首先说一下数据结构String，这是Redis中最简单的一种数据结构，和MemCache数据结构是一样的，即Key-Value型的数据，根据Redis官方文档，Value最大值为512M。下面用表格来看一下String操作的相关命令：命令描述用法SET（1）将字符串值Value关联到Key（2）Key已关联则覆盖，无视类型（3）原本Key带有生存时间TTL，那么TTL被清除SET key value [EX seconds] [PX milliseconds] [NX|XX]GET（1）返回key关联的字...
详解linux运维工程师高级篇（大数据安全方向） hadoop安全目录：kerberos（已发布）elasticsearchknoxoozierangerapache sentry简介： 从运维青铜到运维白银再到运维黄金，这里就要牵扯到方向问题也就是装备，根据自己的爱好，每个人都应该选择一个适合自己和喜欢自己的一个职业技术方向，如：大数据安全，开发运维，云计算运维等等。而掌握的越多前言技术也就是更多的装备，才能更好的在it行业混下去，毕竟it技术更新太快，...
hadoop大数据平台架构之DKhadoop详解大数据的时代已经来了，信息的爆炸式增长使得越来越多的行业面临这大量数据需要存储和分析的挑战。Hadoop作为一个开源的分布式并行处理平台，以其高拓展、高效率、高可靠等优点越来越受到欢迎。这同时也带动了hadoop商业版的发行。这里就通过大快DKhadoop为大家详细介绍一下hadoop大数据平台架构内容。目前国内的商业发行版hadoop除了大快DKhadoop以外还有像华为云等。虽然发行方不同，但在平台...
一、获得了2017年《电子工业出版社》优秀作者 荣获电子工业出版社2017年度优秀作者 二、卖断货，连续第⑨次重印 个人2016.10月出版的《大数据架构详解:从数据获取到深度学习》，卖的还不错，京东，当当，亚马逊一直在热销榜上，一直排在前列，榜首常客！连续卖断货，累计九次重印，重印新书已经上市。多谢大家支持，请大家继续帮忙宣传和推广，选购购买的同学记得好评，让更多同学了解。谢谢。 本书全网（京东、当当、淘宝、亚马逊...
下载：https://pan.baidu.com/s/12-s95JrHek82tLRk3UQO_w 更多资料分享：http://blog.51cto.com/3215120 《深度学习与计算机视觉 算法原理、框架应用》PDF，带书签，347页。《大数据架构详解：从数据获取到深度学习》PDF，带书签，373页。配套源代码。 《深度学习与计算机视觉 算法原理、框架应用》全书共13章，分为2篇，第1篇基础知识，第2篇实例精讲。用通俗易懂的文字表达公式背后的原理，实例部分提供了一些工具，很实用。《...
什么是大型网站? 大型网站要满足一下标准.pv(page views)值, 页面浏览量,一个网站的所有页面，在24小时内被浏览的总的次数, 一般说 到千万.uv(unique visitor) 独立访客: 一个网站的24小时内，有多少个用户来访问该网站， 一般说 到10万ip值，一个网站的24小时内，有多少个ip访问。在不考虑内网和局域网的情况下，uv 等于 ip, 如果考虑的话，uv值略大于 ip,一般说 到10万大型网站带来的问题 大并发 概述: 在同一...
前言 最近在工作中接到一个需求，通过选择的时间段导出对应的用户访问日志到excel中， 由于用户量较大，经常会有导出50万加数据的情况。而常用的PHPexcel包需要把所有数据拿到后才能生成excel， 在面对生成超大数据量的excel文件时这显然是会造成内存溢出的，所以考虑使用让PHP边写入输出流边让浏览器下载的形式来完成需求。 我们通过如下的方式写入PHP输出流 $fp = fopen(php://output, a); fputs($fp, strings); .... .... fclos...
js中有六种数据类型，包括五种基本数据类型（Number,String,Boolean,Null,Undefined）,和一种混合数据类型（Object）。js中变量是松散类型的，因此有时候我们需要检测变量的数据类型。1.Number类型Number类型包含整数和浮点数（浮点数数值必须包含一个小数点，且小数点后面至少有一位数字）两种值。浮点数将会自动转换为整数。var num = 1.00; console.log(num);//1，自动转换为整数浮点数的最高精度是17位，看下面的例子，结果竟然...
js中有六种数据类型，包括五种基本数据类型（Number,String,Boolean,Null,Undefined）,和一种混合数据类型（Object）。 前面说到js中变量是松散类型的，因此有时候我们需要检测变量的数据类型。 typeof操作符可以检测变量的数据类型（输出的是一个关于数据类型的字符串）。 返回如下6种字符串：number,string,boolean,object,undefined,function.且看如下例子： var x = 1; console.log(typeof x);//numbervar a = undefined; cons...
分享知识要点：lubridate包拆解时间 | POSIXlt利用决策树分类，利用随机森林预测利用对数进行fit，和exp函数还原训练集来自Kaggle华盛顿自行车共享计划中的自行车租赁数据，分析共享自行车与天气、时间等关系。数据集共11个变量，10000多行数据。首先看一下官方给出的数据，一共两个表格，都是2011-2012年的数据，区别是Test文件是每个月的日期都是全的，但是没有注册用户和随意用户。而Train文件是每个月只有1-20天，但有两类用户...
1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null 可以在 num 上设置默认值 0，确保表中 num 列没有 null 值，然后这样查询：select id from t where num=03.应尽量避免在 where 子句中使用!=或<>操作符，否则引擎将放弃使用索引而进行全表扫描...