python 如何设置抓取规则
2025-04-29 09:59:27
在Python中设置抓取规则通常涉及到使用网络爬虫框架，如Scrapy或BeautifulSoup。这些工具允许你从网页中提取数据。下面我将分别介绍如何使用Scrapy和BeautifulSoup来设置抓取规则。 1. 使用Scrapy Scrapy是一个快速、高层次的屏幕抓取和网页抓取框架，用于爬取网站并从页面中提取结构化的数据。 安装Scrapy 首先，你需要安装Scrapy。可以使用pip来安装： pip install scrapy 创建一个Scrapy项目 使用以下命令创建一个新的Scrapy项目： scrapy startproject myproject ...
python randint randrange randchoice 的区别
2025-04-28 09:43:32
python中随机数的应用，除了使用 random.random() 外，还有其它的几个随机数，都是很方便，可以参考下，应用到自己合适的场景中. random.random() 生成随机浮点数 生成[0.0, 1.0)范围内的随机浮点数 num = random.random() random.randint 生成指定范围的随机整数 生成指定范围的随机整数，例如[a, b]（包括a和b） num = random.randint(a, b) random.randrang 生成[a, b)范围内的随机整数 num = random.randrange(a, b) random.choice 生成随机列表元素 从列表中随机选择一个元素 items...
公众号助推券限流踩坑
2025-04-23 15:59:03
因为运营公众号不久，最近才发现，一个坑，一个大坑。 起因是公众号刚运营不久，官方鼓励，给了助推券，就想试下效果， 结果呢，是审核没通过，说是内容太过简单，于是就放弃了使用。 本以为，没通过，我自己不用就算了，没想到 还是受到了影响 . 因为使用了助推券，没有通过审核，不仅仅是那一篇文章受影响 ，而是整个账号都受影响 . 官方要你调整后才恢复。而这个在PC端上是没有显示的很明显。只有在公众号助手上有账号检测的功能，才有显示. 真的是让人头疼，难怪写了那么多，都是0推荐。吃一堑长一智，也是好事吧. ...
垃圾评论这么多
2025-04-22 11:26:39
最近把评论功能的内容展现打开了，整理了下，发现好多垃圾评论。 很多都是广告，也有一些打码平台发的，大多数是机器自动扫描植入的. 不得已把评论功能全部都翻新了一遍了,增加了评论限制，评论账号，评论的内容长度限制等。 并且还增加了IP地址记录，后面要把这些频繁 发布垃圾评论的IP给封禁了。 我的个人站，并不是流量站，不需要那么多的垃圾评论. 花了一点时间，把垃圾的广告内容都处理掉了.可能会有部分的遗漏，就先不管了，占用了我太多的精力了. ...
charles抓包怎么看请求体参数
2025-04-18 10:28:27
做为一个开发者，难免会用到抓包工具，这样方便调试或者查看一些线上的问题. 以前一直用fiddler , 也觉得用的顺手，就一直用. 最近很长一段时间没用它了， 突然想用它的时候，发现软件很多事干不了， 就想到了，以前朋友推荐的charles ,朋友是用MAC机器 开发，以前他一直用的就是这个，也觉得不错，就分享给我了。 趁这个机会，刚好用下新的工具试试. 于是下载了charles, 在使用之前需要对应的配置下工具的参数与环境，否则一样是一头污水. 1，安装证书，help->SSL PROXYING ->install charles certificate 进行根证书的安装，否则你只能看到请示，抓 不到对应的HTTPS的数据包 2，设置监听端口，工具栏“proxy”->"s...
crontab中PHP inlucde相对路径导致脚本不执行的解决办法
2025-04-17 16:42:56
因为crontab默认在/root下执行，所以php脚本引入相对路径时，会按照crontab执行路径（/root）去include文件，所以就找不到要include的文件了。 include ('../inc/common.inc.php'); 解决办法一： chdir(dirname(__FILE__));// cd 到php脚本所在的目录 include ('../inc/common.inc.php'); 因为 __DIR__ 和 dirname(__FILE__)是等价的，所以，上面的语句和下面这条语句是一样的： include (__DIR__.'/../inc/common.inc.php'); 解决办法二： 借助shell(假设我的php脚本（my_script.php）在/var...
刷新浏览器网页表单重复提交问题
2025-04-17 13:27:14
在web开发中，经常会碰到表单重复提交问题。 表单重复提交的情况分两种，一种是点击了提交按钮，连续多次提交，导致的重复。 还有一种是浏览器刷新，会把之前的表单内容再次提交一次。 第一种情况的解决方法比较简单，在提交表单后，禁用提交按钮即可。等服务端数据返回后再恢复提交按钮的作用。 第二种情况，可以用多种方式解决，根据自己的实际情况，挑一种。 一是跳转到另外的页面，不在当前表单提交页，可以直接规避这个问题 二是采用AJAX方式进行表单内容的提交 三如果是采用POST 或者GET方式提交 ，那么刷新浏览器必然会提交数据 。这个是浏览器的特性，帮助用户增加体验的， 这个无法修改，但是我们可以告诉 浏览器，把上一次的表单内容清空。 可以采用window.location.reload() 方式让页面重新加载。 如果这个方式也不...
感谢您的关注与鼓励（Thank you for your attention and encouragement）
2025-04-16 17:28:19
我的博客这么久未更新了，以前的评论内容都没有公开过，发现有很多外国友人的留言，有些留言让我甚是感动！他们都很真诚，希望我能保持这种状态，持续更新，把一些有用的知识分享出来，为此发表一篇感谢下已经在关注或者未来关注的友人。 我很想回复已经留言的友人，但是之前没有任何的联系方式如邮箱，所以我只能对他们说抱歉！ 另外评论功能已经更新了，增加了昵称，邮件，个人主页等信息, 为了安全隐私，在评论页只会公开昵称与评论的内容，未来还会增加用户系统，敬请期待! 可能是因为习惯问题，很多友人说找不到我的联系方式，其实我的联系方式一直都在网站的底部, 我的邮箱是: 517730729@qq.com , 您可以给我发邮件，也可以在网站上留言，看到后，我一定会回复，谢谢！ My blog has not been updated for a long time, and the previous co...
闲鱼还能做吗？
2025-04-16 09:45:57
最近在整理，刚好有一批旧物要处理掉， 扔了觉得可惜，就是物尽其用，转给有需要的鱼鱼。 就把东西放到闲鱼平台上。 因为之前没有在闲鱼上放过东西，也不知道什么价位，就随便5块，10块的转了 但是就是这个价格，也没有什么人问津，感觉 有点奇怪， 就大概的去查了下同一平台下同种物品的价格，发现太多的“广告”位 很多就只是几分钱的也有，也有是挂出来卖体力的， 也有卖虚拟产品的，也有卖。。。。反正感觉是什么都有. 很丰富，但是也很乱. 很多二手商在做，虽然号不同，但是一看图文，内容基本上是出自一家. 绝对的二手商操作。 这难不成也是大家信任感降低的原因之一？ ...
大家都在做自媒体，还能做吗？
2025-04-15 09:54:02
现在的感觉就是大家一窝往自媒体挤, 五花八门,什么内容都有人搞。 不管是什么话题，只要能蹭上一波的，都要蹭下，因为有流量就有了收益 , 所以很多人是不管不顾，把什么都拿出来当话题。 哪怕是自家的母鸡生了蛋，也要发出来。 但真的有赚到钱吗？ 感觉大多数人还不如刷广告赚的多，这也是很大一部分人的现状. 那为什么还是如此的坚持呢？估计也是生活所迫，大家都想有点额外的副业收入. 如此之卷的环境，不知道什么时候能有改观. ...