张士玉小黑屋

目录Python爬虫配置Charles设置手机代理服务器安装证书安装PC证书安装Android手机证书Python爬虫对于现在的爬虫程序来说，PC端网页数据往往并不理想。比如就拿CSDN来说，一篇帖子是否上热榜其根据的是App端数据，并不是PC端网页数据。这也是时代的进步，从PC端到移动端，而且还有像小红书一样的App，其根本不提供PC端网页，只有App，要爬取这

指定端口kibana的开放端口为5601，kibana主机ip为172.25.77.6

指定es集群的主机ip，指定kibana的索引

设置为中文

日志分析系统ELK（下）之kibana数据可视化1、什么是kibana？2、kibana安装3、创建可视化访问量的指标4、创建可视化访问量的垂直条形图5、启用xpack安全验证（1）设置es集群（2）设置kibana（3）设置Logstash（4）设置elasticsearch-head6、metricbeat轻量级采集工具7、kibana控制台8、补

清理server4环境

日志分析系统ELK（上）之elasticsearch1、什么是elasticsearch？2、单节点elasticsearch安装3、搭建elasticsearch集群4、elasticsearch可视化方法1——cerebro插件5、elasticsearch可视化方法2——elasticsearch-head插件6、elasticsearch节点角色ELK是elasticsearch、logstash、kibana的组合简称，安装时࿰

文章目录如何解决高并发、限流、数据同步问题1、如何解决高并发2、OpenResty2.1、安装openresty3、广告缓存的载入与读取3.1、Lua+nginx配置3.2、Lua+nginx配置（从redis中获取数据）3.3、添加openresty缓存4、限流配置4.1、控制速率4.2、控制并发量（连接数）5、数据同步的问题5.1、配置masterMysql（开启binlog模式）

ARP的工作流程：

常用网络协议前言TCP/IP五层网络模型回顾应用层协议DNS协议：HTTP协议HTTPS协议传输层协议UDP协议TCP网络层IP协议ICMP协议数据链路层ARP协议物理层整体的网络传输流程前言本篇博客将对基于TCP/IP的五层网络模型中的常见协议做以总结，目的通过这些具体的协议更深刻的认识整体网络的传输流程及相关网络原理TCP/IP五层网络模型回顾应用层：为用户为用户的应用进程提供网络通信服务协议——

输入一个URL后发生了什么？1.DNS应用层协议解析域名2.传输层TCP建立连接3.应用层客户端发送HTTP请求4.网络层5.数据链路层6.服务器处理请求7.关闭TCP连接8.浏览器解析HTML，浏览器布局渲染1.DNS应用层协议解析域名网络的传输是靠ip地址，而我们输入的一般是域名如www.baidu.com。所以我们需要用DNS把域名转换为对应的ip地址。客户端先检查本地hosts是否有对应的IP地址，若找到则返回响应的IP地

分享一个JupyterNotebook插件visualpython，有以下需求可以把玩一下：通过界面拖拽生成Python代码，以最少的编码技能即可把玩爬虫、数据分析、AI等；面向非专业程序员，减少学习编码技能的时间；轻松保存和重用代码。 目录1、安装2、激活3、主界面介绍4、简单把玩一番1、安装在终端操作，输入以下命令行，安装visualpythonpipinstallvisualpython2、激活在终端操作，输入以下命令行，激活visua

前言（sql部分的笔记较多难以整理，先简单说明一下如何使用python进行数据库连接，此外由于Java的技术栈过长，接下来的学习将重新回归到python先实现效果，之后再使用Java进行实现，做进一步的优化）利用Python来实现数据库的连接的话，其实很简单，我们主流使用的第三方库是pymysql这是一个使用python来实现的第三方库，当然在不同的框架中可以直接调用相关使用

整合不易，请留下关注，谢谢！MySQL面试题目录前言99%必问的十道题1.唯一索引比普通索引快吗,为什么2.MySQL由哪些部分组成,分别用来做什么3.MySQL查询缓存有什么弊端,应该什么情况下使用,8.0版本对查询缓存有什么变更4.MyISAM和InnoDB的区别有哪些5.MySQL怎么恢复半个月前的数据6.MySQL事务的隔离级别,分别有什么特点7.做过哪些MySQL索引相关优化8.简要说一下数据库范式9.一千万条数据的表,如何分页查

开头大家好,我是程序员manor,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。暑假打算做一个大数据项目巩固所学知识,学习的课程是某硅谷的实时推荐和机器学习项目https://www.bilibili.com/video/BV1R4411N78S?p=1推荐系统做的最成功的莫过于Amazon的商品推荐，如今小到一个App，大到互联网巨头都在使用推荐系统，善于使用推荐系统，为公司带来可观的利润&