首页 > 全部 > 日排行
HttpClient&Jsoup爬虫的简单应用
详细的介绍已经有很多前辈总结,引用一下该篇文章:https://blog.csdn.net/zhuwukai/article/details/78644484 下面是一个代码的示例: 使用Jsoup进行请求: HttpClient 结合Jsoup: ...
分类:Web开发   时间:2018-04-08 13:02:27    收藏:0  评论:0  赞:0  阅读:2076
从客户端(content="<p>&nbsp; &nbsp; &nb...")中检测到有潜在危险的 Request.Form 值。
从客户端(content=" &nb...")中检测到有潜在危险的 Request.Form 值。说明: ASP.NET 在请求中检测到包含潜在危险的数据,因为它可能包括 HTML 标记或脚本。该数据可能表示存在危及应用程序安全的尝试,如跨站点脚本攻击。如果此类型的输入适用于您的应用程序,则可包括....
分类:其他   时间:2015-10-22 10:40:34    收藏:0  评论:0  赞:1  阅读:10664
专利事务所信息Python爬取
数据来源:http://www.acpaa.cn/ 目前事务所的信息没有做反爬限制,还是很容易拿到数据的 没有用html解析工具,直接上正则,结果就是需要处理很多乱七八糟的空格。。。为了能将日期顺利的插入到数据库,做了很多转换。这个代码没用多线程。 下面是代码,Python版本为3.5,需要安装py ...
分类:编程语言   时间:2016-08-14 16:00:00    收藏:0  评论:0  赞:0  阅读:11077
解决pycharm问题:module 'pip' has no attribute 'main'
问题 更新pip之后,Pycharm安装package出现如下报错: 解决 找到安装目录下 helpers/packaging_tool.py文件,找到如下代码: 修改为如下,保存即可。 ...
分类:其他   时间:2018-04-21 15:11:02    收藏:0  评论:0  赞:3  阅读:913
ssdb操作文档
# 启动为后台进程(不阻塞命令行)./ssdb-server -d ssdb.conf# 重启./ssdb-server -d ./ssdb.conf -s restart#关闭数据库 ./ssdb-server ./ssdb.conf -s stop#在SSDB服务器端更改ssdb.conf,允许所有client连接[root@localhost ssdb]# vi ssdb.conf &nbs
分类:数据库技术   时间:2018-01-15 17:28:14    收藏:0  评论:0  赞:0  阅读:9345
selenium 设置代理选项
这样添加选项,执行get后会显示网页无法连接 需要用desired_capabilities添加选项 ...
分类:其他   时间:2018-04-16 14:11:32    收藏:0  评论:0  赞:0  阅读:1628
webmagic学习-使用注解编写爬虫
写在前面: 官方文档:http://webmagic.io/docs/zh/posts/ch5-annotation/README.html WebMagic支持使用独有的注解风格编写一个爬虫,引入webmagic-extension包即可使用此功能。 在注解模式下,使用一个简单的Model对象加上 ...
分类:Web开发   时间:2017-10-25 15:08:56    收藏:0  评论:0  赞:0  阅读:2756
nginx
nginx 称负载均衡,又称反向代理。过去的一段时间里一直纠结于,什么是反向代理,那有反向代理,也就有正向代理咯。 直到某一天看到这么一段话,“正向代理代理客户端,反向代理代理服务器”,一针见血。 如下图: 反向代理: (1) 需要有一个负载均衡设备来分发用户请求,将用户分发到到空闲的服务器上 (2 ...
分类:其他   时间:2018-04-24 17:05:15    收藏:0  评论:0  赞:0  阅读:438
C#程序中设置全局代理(Global Proxy)
1. HttpWebRequest类的Proxy属性,只要设置了该属性就能够使用代理了,如下: 1 //设置代理 2 WebProxy WP = new WebProxy("41.76.44.76", 3128); 3 ICredentials jxCredt = new NetworkCreden ...
分类:Windows开发   时间:2016-09-02 13:23:15    收藏:0  评论:0  赞:0  阅读:21647
HttpClient
HttpClient是可以用来提供支持HTTP协议的客户端编程工具包 ...
分类:Web开发   时间:2017-06-06 00:23:43    收藏:0  评论:0  赞:0  阅读:23930
反反爬虫 IP代理
0x01 前言 一般而言,抓取稍微正规一点的网站,都会有反爬虫的制约。反爬虫主要有以下几种方式: 0x02 概要 今天我们先主要来讲一讲,如何应对第2条的反反爬虫,如何通过多IP抓取。 通过多IP爬虫,又分为以下几种形式: 0x03 正文 1. ADSL拨号 我一般是在windows平台ADSL拨号 ...
分类:其他   时间:2017-11-07 13:56:51    收藏:0  评论:0  赞:0  阅读:2986
微信中的表情符号代码对照表
在微信中聊天的时候我们都会使用如下这样的大量表情: 以下整理了微信中表情图片和字符串代码、替换关键字的对照表,以微笑为例,在微信聊天窗口中输入 /::) 会自动转换成微笑符号(电脑端不会转换),而输入 [微笑] 在发送时也会转换成,事实上输入 [Smile] 或者 /Smile 也会实现同样的转换, ...
分类:微信   时间:2017-06-30 13:19:27    收藏:0  评论:0  赞:0  阅读:5510
设有一数据库,包括四个表:学生表(Student)、课程表(Course)、成绩表(Score)以及教师信息表(Teacher)。四个表的结构分别如表1-1的表(一)~表(四)所示,数据如表1-2的表(一)~表(四)所示。用SQL语句创建四个表并完成相关题目。
表(一)Student (学生表) 表(一)Student中的数据 表(二)Course(课程表) 表(二)Course(课程表)中的数据 表(三)Score(成绩表) 表(三)Score(成绩表)中的数据 表(四)Teacher(教师表) ...
分类:数据库技术   时间:2016-06-08 15:21:56    收藏:0  评论:0  赞:0  阅读:6771
element-ui中upload组件如何传递文件及其他参数
最近项目用到了vuethink,里面集成了element-ui,之前一直用的是bootstrap框架,对js也是一知半解,然后也用过vue.js,但也是学的不通透的,然后就各种入坑。 下面就分析一下我使用element-ui遇到的问题以及解决方法吧,如有不足请指正。 首先在element-ui的官网 ...
分类:其他   时间:2017-09-13 20:44:57    收藏:0  评论:0  赞:5  阅读:12920
新手入侵笔记
【 拿shell 】1.直接上传asp asa jsp cer php aspx htr cdx 格式的木马,不行就利用IIS6.0解析漏洞”:1.asp;1.jpg/1.asp;.jpg/1.asp;jpg/1.asp;.xls2.上传图片木马遇到拦截系统,连图片木马都上传不了,记事本打开图片木马...
分类:其他   时间:2014-03-22 00:58:25    收藏:0  评论:0  赞:0  阅读:27522
SpringBoot启动报错【This application has no explicit mapping for /error.....】
今天做SpringBoot小例子,在请求controller层的时候出现如下问题。 Whitelabel Error Page This application has no explicit mapping for /error, so you are seeing this as a fallb ...
分类:移动平台   时间:2017-04-06 21:11:57    收藏:0  评论:0  赞:30  阅读:58892
Maven报错:Non-resolvable parent POM: Failure to find
使用maven创建子工程时,子工程需要依赖父工程,创建以后报错Project build error: Non-resolvable parent POM: Failure to find...... 网上的答案绝大多数都是在<parent></parent>中间加一行:<relativePath> ...
分类:其他   时间:2017-06-21 10:50:57    收藏:0  评论:1  赞:4  阅读:7593
Navicat连接mysql出现2003——can't connect to mysql server on localhost(10061)引发的关于人生的思考)
一:起因 (0)最近由于病了一场,闲暇时间(即生病期间)一直思考如下问题: 思考一:如何做一名合格的程序猿,怎么才能成为一名名副其实的程序猿? 思考二:还有就是到底,值不值得熬夜加班去搞研发(或转型或做相对轻松的其它IT岗位~~~对于这个问题,我一时无法给出答案,希望各位帮我分析一下,不胜感激!!!) (1)如果没有做到这一点你怎么能说,你是一名合格的程序猿 —— 安装程序或者运行开发程序...
分类:数据库技术   时间:2015-05-16 10:31:28    收藏:0  评论:0  赞:19  阅读:76335
十六进制转八进制
基础练习 十六进制转八进制 时间限制:1.0s 内存限制:512.0MB问题描述 给定n个十六进制正整数,输出它们对应的八进制数。输入格式 输入的第一行为一个正整数n (1#include#include#includeusing namespace std;int num[400005],...
分类:其他   时间:2015-03-31 00:39:12    收藏:0  评论:0  赞:0  阅读:45028
MySQL的my.cnf文件(解决5.7.18下没有my-default.cnf)
官网说:从5.7.18开始不在二进制包中提供my-default.cnf文件。参考:https://dev.mysql.com/doc/refman/5.7/en/binary-installation.html 经过测试,在5.7.18版本中,使用tar.gz安装时,也就是压缩包解压出来安装这种, ...
分类:数据库技术   时间:2017-07-13 09:55:45    收藏:0  评论:0  赞:5  阅读:12143
2391642条   1 2 3 4 ... 119583 下一页
© 2014 bubuko.com 版权所有 鲁ICP备09046678号-4
打开技术之扣,分享程序人生!
             

鲁公网安备 37021202000002号