python爬⾍设计体会_最近所学——爬⾍⼼得以及学习体会（本⼈的第⼀篇博客）...由于论⽂的关系，要⼤量的微博⽂本数据，在⽹上查了很多，没有可以直接⽤的现成数据，因此就⼊了爬⾍的坑，通过同学介绍看了《精通Python⽹络爬⾍》的书，也结合⼀些⼤⽜的博客，如愿获得了⾃⼰想要的数据。在这主要记录⼀下⾃⼰学习这本书的⼼得、⾃⼰爬取微博数据的过程以及中途遇到的⼀些问题。关于精通Python⽹络爬⾍这本书...

python正则表达式前瞻_Python的正则表达式引⼦⾸先说 正则表达式是什么？正则表达式，⼜称正规表⽰式、正规表⽰法、正规表达式、规则表达式、常规表⽰法(英语：Regular Expression，在代码中常简写为regex、regexp或RE)，计算机科学的⼀个概念。正则表达式使⽤单个字符串来描述、匹配⼀系列匹配某个句法规则的字符串。在很多⽂本编辑器⾥，正则表达式通常被⽤来检索、替换那些匹配...

js正则表达式校验折扣1.1~9.9⼀前提  这是今天开发遇到的⼀个⼩问题，⾃⼰本⾝是没有学过正则的，所以只有去百度上，发现⼤部分都不是我想要的，所以只有看正则表达式的语法了。js正则表达式判断数字⼆结论  最后得出的结论是  -------------- /^(?=1\.[1-9]|[1-9]\.\d).{3}$|^([2-9])$/，  解释：&nb...

js正则表达式多个转义字符的⽤法我们都知道在js中遇到特殊字符要使⽤转义字符，但是如果多个转义字符同时出现的话，那⼜是怎么⽤的呢，我突发奇想，然后去⼀个⼀个的试了⼀下，最后终于把这个地⽅搞清楚了。js中定义正则表达式有两种⽅法，这两种⽅法同样的正则表达式但是运⾏的结果可能是不相同的。第⼀种，直接定义法：var reg1 = /\d/g;var str = '1';console.log(reg1....

Java利⽤replaceAll替换中括号Java的replaceAll函数默认是不能替换中括号的，例如想替换[b]到<b>，结果却就变成[<b>]解决⽅案就是⾸先利⽤正则表达式替换中括号，然后再替换中括号内的内容：infos = placeAll("[\\[\\]]","");不过后来⼜查询了下资料，发现中括号在java中居然是特殊字符，⼀对中括号⾥的内容...

Android系统哪些程序可以删除(仅供参考)发布时间：2011-08-05 11:42:09　来源：本站原创　浏览数：3605资讯摘要：Android手机系统中默认会自带很多无用程序，这些应用，平时很少 用不到，但因为是系统自带的，所以它们像牛皮癣一样内嵌在手机里，无法去除。下面列举一些能够删除和不能够删除的软件列表，希望对G友有用！怎么删除呢？ 当然是下载一个安卓优化大师 V2.0.2.apk...

AndroidStudio点击运⾏app没反应当时把 as 升级后，发现运⾏ app 的按钮点了没反应，连⽇志都没有。。经过⾃⼰⼀番折腾后，发现是 gradle plugin 版本的问题。这是截⾄发⽂时，插件和 gradle 版本的对应关系，把插件版本改为 3.6.0 以下即可，gradle 版本可以是最新的。版本在这⾥改android最新版如果⽹速慢的话下载时间会⽐较久，不想这么做的话每次要运⾏...

使⽤python库解析dom树使⽤Beautiful Soup解析dom本⽂主要介绍如何使⽤Beautiful Soup解析dom。Beautiful Soup的简介Beautiful Soup提供⼀些简单的、python式的函数⽤来处理导航、搜索、修改分析树等功能。它是⼀个⼯具箱，通过解析⽂档为⽤户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出⼀个完整的应⽤程序。Beautiful...

gdb源码在linux哪个⽬录,GDB源代码查路径在gdb程序的时候，有时候会发现源代码⽂件不到，对于那些带调试信息的系统库或者第三⽅库，很多时候当你真正想gdb去追他源代码的时候你会发现gdb根本不到这些源代码路径。这个时候有两种选择：【1】如果gdb这个时候告诉你不到这个带调试信息库的源⽂件路径，此时给出的路径地址是绝对路径，⽐如/home/rickyk/qt-4.8./src/cor...

Windows7下新建记事本的四种编码⽅式如图所⽰，在win7新建记事本，再点击另存为，发现如图所⽰的四种默认编码⽅式，但实际这个txt⽂件的编码到底是什么，还是得通过notepad来查看，才准确。1.ANSI新建⼀个记事本，由于默认是ANSI编码，所以不⽤改编码⽅式了。⽂件⼤⼩：0字节所以使⽤python读取⽂本，也是为空在notepad下查看编码⽅式为：总结：win7记事本的ANSI，实际为，...

Delphi读取和写⼊utf-8编码格式的⽂件读取UTF-8格式的⽂件内容function LoadUTF8File(AFileName: string): string;var  ffileStream:TFileStream;fAnsiBytes: string;S: string;beginffileStream:=TFileStream.Create(AFileName,fmOp...

C语⾔结构体初始化的四种⽅法定义struct InitMember{int first；double second；char* third；float four;};⽅法⼀：定义时赋值struct InitMember test = {-10,3.141590，"method one"，0.25}；需要注意对应的顺序，不能错位。⽅法⼆：定义后逐个赋值struct InitMember test；c...

java中List按指定⼤⼩分割之前写过的代码，⼏个⽉后遇到类似的功能，感觉很熟悉，稍微费些劲也能做到，但是觉得有些不⽢。明明之前整理好的为什么要重新做？百度参考其他⼈的思路感觉不是很顺⼼，个⼈原因吧。于是翻箱倒柜出以前的代码，贴在这⾥留作笔记，或许也有其他同⾏有相似需求，聊做参考。/*** 数组切分**/public class PartitionList {/*** ⽅式⼀* ⾮均分，最后⼀...

Pythonos模块中的isfile（）和isdir（）函数均返回false问题解决⽅法今天在写⼀个linux下⾃动备份指定⽬录下的所有⽬录的脚本时，遇到了⼀个问题，由于我是需要备份⽬录，所以，需要判断扫描的⽂件是否为⽬录，当我⽤os.path.isdir()来判断的时候，发现所有⽂件均返回false，刚开始以为是系统兼容性问题，进⼀步测试，发现⽤os.path.isfile()，这些⽂件还是返回...

java写⼀个post⽅法_个⼈学习系列-java代码实现post请求最近在开发的时候发现了⼀个需求，就是要使⽤post请求去请求其他项⽬的接⼝，并且还需要带参。所以就研究了⼀下。java代码实现post请求1. 搭建springboot环境1.l的配置org.apache.httpcomponentshttpclient4.5.101.2 test POST⽅法实现@RunWit...

textarea显⽰多出⼀段空格的原因HTML中标签<textarea>内指定输⼊⼀段⽂本，content的字数以及⽂本框显⽰⾏列数可以通过maxlength,rows,cols属性来定义，⽽在我们提供给浏览器进⾏显⽰时，我相信有朋友会发现有时候显⽰出来的内容会莫名其妙的多出⼀段空格，导致显⽰效果不满意。其实原因很简单，如果我们使⽤如下⼀段代码时：textarea中cols表示在浏览器...

ElementUITable组件固定列及滚动条样式异常序⾔  在使⽤Elemet UI时，常⽤的el-table组件的固定列显⽰不正常：a.固定列最后⼀⾏显⽰不正常，最后⼀⾏横向只显⽰⼀部分。b.⽤横向滚动条滚动表格时，固定列跟着⼀起滚动。解决⽅法a.解决问题a时百度挺管⽤，很多⼈都遇到这个问题，于是按照别⼈的答案，修改固定列的⾼度。.el-table__fixed{  hei...

element-UI（v2.4.9）table性能问题浅谈最近在浏览项⽬时⽆意中发现负责的模块在滚动时会出现些许卡顿。通过chrome的performance⼯具进⾏对⽐测试发现：1. ⿏标放在滚动条上，即不再页⾯之内时，⽤滚轮进⾏滚动，⽆明显异常；2. ⿏标放在table组件上时，⽤滚轮滚动，感觉到了卡顿，见下图；performance从上图可以发现，在某些时间段内帧数极低，同时⽕焰图上可以发现...

element表格横向滚动条使⽤element-ui组件的表格设置了固定尾列配合固定表头后发现的问题固定列超出元素块会把下⾯的滚动条覆盖挡住，导致点击不了这个位置的箭头和滚动条。经查看element-ui⽂档发现解决办法是添加个流体⾼度属性 max-height<el-table height="600" max-height="600">解决了：...

Python使⽤xlwt模块将多⾏多列数据循环写⼊excel⽂档的操作我就废话不多说了，⼤家还是直接看代码吧~#!/usr/bin/python# -*- coding: utf-8 -*-import xlwtimport redef host_regex(dataline):host_regex = r"<host>(.*?)</host>"host = re.find...

c语⾔中百分号ld是什么意思,URL中的百分号的⿇烦最近在 ASP.NET 2.0 中，需要将⼀组字节(byte[])⽤ GET 参数传递到另⼀个 .aspx 页⾯，采取的办法是进⾏ BASE64 编码。⾸先将byte[] 进⾏ BASE64 编码(Convert.ToBase64String)，然后调⽤ Server.UrlEncode 进⾏ % 转换，因为 BASE64 ⾥有“+”、“=”等特...

【线上问题】feign对get请求中⼤括号的处理问题场景url编码处理现在服务上⾯有⼀个get请求，这个请求⽐较特殊，他的URL⾥⾯有⼀个属性的值包含⼤括号。现在这个请求通过postman把⼤括号进⾏⼀次encode然后调⽤到⽹关是没问题的。但是如果在内⽹环境通过ribbon去调⽤的话我进⾏⼀次encode以后⽹关这边会报400，也就是Bad Request。排查1. 先确定⼀下这个请求是否到了⽹...

pythonurl编码空格_基于python爬⾍爬到含空格的url的处理⽅法道友问我的⼀个问题，之前确实没遇见过，在此记录⼀下。问题描述在某⽹站主页提取url进⾏迭代，爬⾍请求主页时没有问题，返回正常，但是在访问在主页提取到的url时出现了400状态码(400 Bad Request)。结论先贴出结论来，如果url⾥有空格的话，要把空格替换成%20，也就是url编码，否则就会出现400。解决过程⾸...

解决element-ui语法提⽰不出现的问题这⼏天在hbuilder的vue项⽬中使⽤elementUI，结果发现有的项⽬会⾃动弹出代码补全提⽰，⽽有的却不⾏html自动弹出公告代码经过⼀番研究，发现这个差别产⽣的原因是：导⼊hbuilder的⽂件夹层数不同例如说，我这个项⽬的地址是C:/project/vue_project/homework如果你导⼊的是vue_project⽂件夹，hbuil...

30个学习⼤数据挖掘的重要知识点！建议收藏下⾯是⼀些关于⼤数据挖掘的知识点，今天和⼤家⼀起来学习⼀下。1. 数据、信息和知识是⼴义数据表现的不同形式。2. 主要知识模式类型有：⼴义知识，关联知识，类知识，预测型知识，特异型知识3. web挖掘研究的主要流派有：Web结构挖掘、Web使⽤挖掘、Web内容挖掘4. ⼀般地说，KDD是⼀个多步骤的处理过程，⼀般分为问题定义、数据抽取、数据预处理，数据挖掘...

js字符串排序⽅法前端开发过程中有时需⾃⼰⼿写排序⽅法sort函数 js⼀般想到数字的字符串排序⽅法 我们会⽤到 var newArr = arr. sort(function(a,b){return a - b})来进⾏排序但除此之外我们会需要进⾏⼀些字符串的排序此时我们可以⽤到 var newArr = arr.sort(function(a,b){return a.localeCompare...

js中array的sort（）⽅法使⽤介绍或许你⼀直在⽤javascript中的array的sort.或许你⼀直相信它会给你正确的结果。⾄少我曾经也是这样认为的，直到有⼀天，我看到了如下的代码：复制代码代码如下:[5,10,1].sort();或许结果有点出⼈意料。结果如下：复制代码代码如下:[1,10,5]仔细深究之后，发现原来默认的sort⽅法并不是按照整形数据来排序，⽽是⽤的字符串匹配⽅式。...

【导语】为⼤家整理了美⽂赏析：就为了今天(Just For Today)，敬请欣赏。更多内容尽在。  Just for today I will try to live through this day only and not solve my whole life problem at once. I can do something for twelve hours that wo...

switchcase语句踩坑今天写了⼀个根据选择的⽣⽇⾃动选择年龄段的功能代码如下：$('.pSetBaseBirth').change(function(){//选择时间⾃动计算年龄段var nowDate = new Date().getTime(),//当前毫秒数nowyear = $('#birthYear').val(),//选择的年份nowMonth = $('#birthMonth'...

html页⾯背景⾳乐bgsoud该特性是⾮标准的，请尽量不要在⽣产环境中使⽤它！进⽽想⽤audio标签audio<audio src="someaudio.wav">您的浏览器不⽀持 audio 标签。html播放音乐代码</audio>但是有个问题，audio在很多情况下都被限制⾃动播放，⽆奈转⽽使⽤js来控制播放js控制播放<!DOCTYPE HTML>&l...