充值通道打不开了啊！！！
建议高峰期直接禁止搜索功能
优化一下sql哇
2019号人造人 发表于 2023-06-08 12:09
然而论坛每天晚上10点左右必卡，这和sd助手怕是关系不大吧，人家一直都在获取数据。。。
没说这和助手有关，我本人也在用助手https://mag1.sdgun.net/public/emotion/face_wulian.png，用爬虫爬数据很正常，只是探讨这是否属于爬虫
太灰狼 发表于 2023-06-08 15:37
没说这和助手有关，我本人也在用助手，用爬虫爬数据很正常，只是探讨这是否属于爬虫
就是小程序爬虫导致，现在被发现之后，他调低了爬取频率。现在明显能感觉到访问快了点，也不会出现网络有问题打不开崩溃什么的糟心事。
Ward 发表于 2023-06-08 15:44
就是小程序爬虫导致，现在被发现之后，他调低了爬取频率。现在明显能感觉到访问快了点，也不会出现网络有问题打不开崩溃什么的糟心事。
不会吧，现在用爬虫爬数据，挺多的，省事省力https://mag1.sdgun.net/public/emotion/face_wulian.png，正常爬取不会造成这种情况啊
Ward 发表于 2023-06-08 15:44
就是小程序爬虫导致，现在被发现之后，他调低了爬取频率。现在明显能感觉到访问快了点，也不会出现网络有问题打不开崩溃什么的糟心事。
崩溃倒是没遇到过，他倒是会时不时的提示我，说我网络有问题，但一般过会儿它自动就恢复了，或者关掉重进就好了。
太灰狼 发表于 2023-06-08 15:47
不会吧，现在用爬虫爬数据，挺多的，省事省力，正常爬取不会造成这种情况啊
你去看那个老哥的分析，我也是学计算机的，他说的很有道理，因为爬虫请求一次，服务器响应一次，何况频繁访问，服务器每次响应都会造成大量的io计算磁盘运算。才导致我们访问卡顿，管理员公告也说了，出现了磁盘加载慢响应中断，并且也相当于点名了有人在开发第三方应用，投放爬虫导致。那么是谁就不言而喻了
太灰狼 发表于 2023-06-08 15:48
崩溃倒是没遇到过，他倒是会时不时的提示我，说我网络有问题，但一般过会儿它自动就恢复了，或者关掉重进就好了。
网络有问题就是崩溃、服务器崩溃了。
Ward 发表于 2023-06-08 15:50
你去看那个老哥的分析，我也是学计算机的，他说的很有道理，因为爬虫请求一次，服务器响应一次，何况频繁访问，服务器每次响应都会造成大量的io计算磁盘运算。才导致我们访问卡顿，管理员公告也说了，出现了磁盘加载慢响应中断，并且也相当于点名了有人在开发第三方应用，投放爬虫导致。那么是谁就不言而喻了
确实
Ward 发表于 2023-06-08 15:50
你去看那个老哥的分析，我也是学计算机的，他说的很有道理，因为爬虫请求一次，服务器响应一次，何况频繁访问，服务器每次响应都会造成大量的io计算磁盘运算。才导致我们访问卡顿，管理员公告也说了，出现了磁盘加载慢响应中断，并且也相当于点名了有人在开发第三方应用，投放爬虫导致。那么是谁就不言而喻了
这也是要看访问请求频率的吧，除非异常大量访问请求，一般能扛住，爬虫本身不是问题，那得看设置
太灰狼 发表于 2023-06-08 16:05
这也是要看访问请求频率的吧，除非异常大量访问请求，一般能扛住，爬虫本身不是问题，那得看设置
官方不给爬，还要爬，只能说一意孤行。请求频率还大，现在被说了调整小了，下午都没有网络异常，网络崩溃，网络访问不了。https://mag1.sdgun.net/public/emotion/face_wangchai.png
http://picapp.sdgun.net/pic/20230608/1686211633476639751.jpg
http://picapp.sdgun.net/pic/20230608/1686211657604439807.jpg
土豆https://mag1.sdgun.net/public/emotion/face_043.png
magicmark 发表于 2023-06-08 16:08
官方不给爬，还要爬，只能说一意孤行。请求频率还大，现在被说了调整小了，下午都没有网络异常，网络崩溃，网络访问不了。
还是频率问题呗，我工作要写报表，每天早上爬一次前一天系统平台的数据，偷懒好用啊https://mag1.sdgun.net/public/emotion/face_wulian.png
太灰狼 发表于 2023-06-08 16:29
还是频率问题呗，我工作要写报表，每天早上爬一次前一天系统平台的数据，偷懒好用啊
对啊，他现在爬虫频率调小了，大家现在访问也不卡了https://mag1.sdgun.net/public/emotion/face_wulian.png，希望他早点获取官方的爬虫许可
magicmark 发表于 2023-06-08 16:31
对啊，他现在爬虫频率调小了，大家现在访问也不卡了，希望他早点获取官方的爬虫许可
合作吧，他这个小程序挺好用，我也在用https://mag1.sdgun.net/public/emotion/face_002.png
太灰狼 发表于 2023-06-08 16:32
合作吧，他这个小程序挺好用，我也在用
只要官方授权他，他就可以随便弄哈哈
希望论坛越办越好吧
https://mag1.sdgun.net/public/emotion/face_061.pnghttps://mag1.sdgun.net/public/emotion/face_068.png
https://mag1.sdgun.net/public/emotion/face_wulian.png
BVVD直呼内行
已阅https://mag1.sdgun.net/public/emotion/face_061.png
magicmark 发表于 2023-06-08 16:36
只要官方授权他，他就可以随便弄哈哈
是的啊，这个想要万无一失，肯定得和论坛方联系，做一下压力测试。
magicmark 发表于 2023-06-08 16:08
官方不给爬，还要爬，只能说一意孤行。请求频率还大，现在被说了调整小了，下午都没有网络异常，网络崩溃，网络访问不了。
哈哈哈哈哈哈 啥叫mobile =1 ？ 贴个 这个参数的 技术定义来看看？
disallow mobile =1 是不是 就是 禁止手机端访问呢？
有没有可能性
1. 论坛不想别人第三方查询 于是想着弄点规则，
2. 没太注意，一整套防爬虫规则直接用了，其中 某些没有移动端需求的网站 才用的规则 如disallow mobile=1 也上了
导致访问禁止， “你的网络有问题”
萌萌男 发表于 2023-06-09 08:01
哈哈哈哈哈哈 啥叫mobile =1 ？ 贴个 这个参数的 技术定义来看看？
disallow mobile =1 是不是 就是 禁止手机端访问呢？
有没有可能性
1. 论坛不想别人第三方查询 于是想着弄点规则，
2. 没太注意，一整套防爬虫规则直接用了，其中 某些没有移动端需求的网站 才用的规则 如disallow mobile=1 也上了
导致访问禁止， “你的网络有问题”
手机app客户端访问用的可不是这个接口，这个robots.txt是防止爬虫爬手机网页端的
挺笑话的，也挺嘴硬的
http://picapp.sdgun.net/pic/20230609/1686271531128982704.jpg
萌萌男 发表于 2023-06-09 08:01
哈哈哈哈哈哈 啥叫mobile =1 ？ 贴个 这个参数的 技术定义来看看？
disallow mobile =1 是不是 就是 禁止手机端访问呢？
有没有可能性
1. 论坛不想别人第三方查询 于是想着弄点规则，
2. 没太注意，一整套防爬虫规则直接用了，其中 某些没有移动端需求的网站 才用的规则 如disallow mobile=1 也上了
导致访问禁止， “你的网络有问题”
终于有人提这个问题了
mobile=1和mobile=yes是完全不同的逻辑，这个老哥一直在混淆并拿这个说事，可能是百度来的新鲜知识。
Discuz这个论坛架构本身带有一套移动版本，即mobile=yes时自动启用的，对应访问电脑版的mobile=no（默认）。
然而SDG论坛在基于Discuz基础上做了二次开发，mobile=1代表简单版论坛页面，mobile=2代表手机版论坛页面。与mobile=yes和no的逻辑已经完全不同了，如果按照那位老哥理解的1=yes，0=no，请问2代表啥？
况且我未必非要从mobile=1去实现我的程序运行，从archive界面能达成一样的效果，只是懒得和他一个外行装内行的人再解释。
magicmark 发表于 2023-06-09 08:45
挺笑话的，也挺嘴硬的
http://picapp.sdgun.net/pic/20230609/1686272490027021595.jpg
magicmark 发表于 2023-06-09 08:45
挺笑话的，也挺嘴硬的
而且你怎么还在用我的程序啊 后台显示你又登陆了 又在接收推送https://mag1.sdgun.net/public/emotion/face_wulian.pnghttps://mag1.sdgun.net/public/emotion/face_wulian.pnghttps://mag1.sdgun.net/public/emotion/face_wulian.png
小阿发 发表于 2023-06-09 09:04
而且你怎么还在用我的程序啊 后台显示你又登陆了 又在接收推送
拿出证据，我不屑用你的程序，你也不用在这自欺欺人
小阿发 发表于 2023-06-09 09:04
而且你怎么还在用我的程序啊 后台显示你又登陆了 又在接收推送
还绑架我用你程序，你现在只需要等官方处理你的爬虫行为，别做无知的辩解了
小阿发 发表于 2023-06-09 09:04
而且你怎么还在用我的程序啊 后台显示你又登陆了 又在接收推送
你觉得我用你程序了，你去封掉我账户，然后拿出我今天还在用你爬虫程序的证据。你说你不是爬虫，拿出你不是爬虫的证据。啥都拿不出来在这自欺欺人https://mag1.sdgun.net/public/emotion/face_076.png
magicmark 发表于 2023-06-09 09:14
拿出证据，我不屑用你的程序，你也不用在这自欺欺人
你和大家说说为什么就不敢提供你的账号Id呢 我帮你禁用掉就好了啊
magicmark 发表于 2023-06-09 09:22
你觉得我用你程序了，你去封掉我账户，然后拿出我今天还在用你爬虫程序的证据。你说你不是爬虫，拿出你不是爬虫的证据。啥都拿不出来在这自欺欺人
这不就是你吗 哥们 最后一次登陆时间9:25 你可笑不可笑
http://picapp.sdgun.net/pic/20230609/1686274097852645403.jpg
http://picapp.sdgun.net/pic/20230609/1686274097880418222.jpg
小阿发 发表于 2023-06-09 09:23
你和大家说说为什么就不敢提供你的账号Id呢 我帮你禁用掉就好了啊
我没有理由用你的程序，你昨天不都是知道我openid了吗，还造谣我攻击你服务器（你现在问我id，不就是证明你昨天在抹黑吗），那你现在问我id干什么？打自己脸吗。你现在要做的就是承认你的爬虫行为，你主动去赔偿你对论坛造成的经济损失。并且等待官方处理。
magicmark 发表于 2023-06-09 09:30
我没有理由用你的程序，你昨天不都是知道我openid了吗，还造谣我攻击你服务器（你现在问我id，不就是证明你昨天在抹黑吗），那你现在问我id干什么？打自己脸吗。你现在要做的就是承认你的爬虫行为，你主动去赔偿你对论坛造成的经济损失。并且等待官方处理。
我找到了呀 我也没封你 就是看你什么时候自己敢说呀 我下面也放出来了 那不就是你吗 你不会又说那个不是你然后让我证明了吧？哈哈哈哈哈哈https://mag1.sdgun.net/public/emotion/face_wulian.pnghttps://mag1.sdgun.net/public/emotion/face_wulian.pnghttps://mag1.sdgun.net/public/emotion/face_wulian.png
小阿发 发表于 2023-06-09 09:32
我找到了呀 我也没封你 就是看你什么时候自己敢说呀 我下面也放出来了 那不就是你吗 你不会又说那个不是你然后让我证明了吧？哈哈哈哈哈哈
好了别混淆概念，有我id就赶紧禁了，我没理由也没必要使用你的程序，你的程序是不是爬虫官方技术人员心里有数，你等着结果就好https://mag1.sdgun.net/public/emotion/face_076.png
magicmark 发表于 2023-06-09 09:39
好了别混淆概念，有我id就赶紧禁了，我没理由也没必要使用你的程序，你的程序是不是爬虫官方技术人员心里有数，你等着结果就好
好的呢 我等着呢
magicmark 发表于 2023-06-09 09:39
好了别混淆概念，有我id就赶紧禁了，我没理由也没必要使用你的程序，你的程序是不是爬虫官方技术人员心里有数，你等着结果就好
另外谢谢你哈 昨天话题这么一炒热 多了200多个用户 每天又能多赚好几毛钱 感谢老哥https://mag1.sdgun.net/public/emotion/face_076.pnghttps://mag1.sdgun.net/public/emotion/face_076.pnghttps://mag1.sdgun.net/public/emotion/face_076.png
支持
顶
支持
提个问为什么我私信发不出去
被ddos攻击了？
支持
支持
支持
确实
了解
厉害