知乎问答采集 知乎寻求帮助
编辑整理：整理来源：维基百科，浏览量：109，时间：2022-06-22 13:42:01
知乎问答采集，知乎问题采集，知乎视频采买
前沿：知乎问答采集
基本的爬虫工作原理
基本的http抓取工具，scrapy
Bloom Filter: Bloom Filters by Example
如果需要大规模网页抓取，你需要学习分布式爬虫的概念。其实没那么玄乎，你只要学会怎样维护一个所有集群机器能够有效分享的分布式队列就好。最简单的实现是python-rq: https://***.com/nvie/rq
rq和Scrapy的结合：darkrho/scrapy-redis · GitHub
后续处理，网页析取(grangier/python-goose · GitHub)，存储(Mongodb)
前几天我上知乎，想回答一个问题，于是进行修改完善，结果竟然被禁言七天。这一下子彻底把我激怒了，知乎这是什么骚操作，动不动就禁言，我只不过是修改一下问题，这也有错？在知乎网站回答问题、发表文章又没收入，纯粹是爱好，居然还遭到刁难！实在太恶心太垃圾了。
现在无缘无故被禁言，我也只能礼尚往来，不用知乎一个星期。如果以后再禁言我，我就尽可能地少用。当然，我也不会赌气完全不用，毕竟知乎现在已经是一个很大的网站了，如果上网，难免会用到。
知乎这个网站，我是几年前接触的，刚开始对它的印象很好，觉得里面的很多回答质量很高，有很多独特的看法。当时的知乎，是许多精英的聚集地，特别是相比于天涯、贴吧等论坛到处的吹牛、辱骂、胡扯，其质量足足高出好几个等级。
当时很多人也看好知乎，把它当做知识的殿堂，很多自媒体纷纷到这里采集资料和抄袭一些精彩的答案。但从2018年开始，知乎的质量急转而下，出现了很多乱七八糟的问题和回答，正一步步天涯化。
2010年12月，周源创办知乎，一开始是采用邀请制注册方式。周源出生于1980年12月18日，是人，毕业于理工大学和东南大学，这两所大学都是重点大学。从中可以看到，和很多互联网大佬一样，周源也是一个学霸。
2011年3月，知乎就获得李开复的天使轮投资，之后又获得启明投资的千万美元A轮投资，2013年3月，知乎向公众开放注册。2014年6月，知乎完成由软银财富领投的2200万美元的B轮融资，2015年11月8日，C轮融资5500万美元，2017年1月12日，知乎宣布完成D轮1亿美元融资，2018年7月，知乎完成新一轮融资，融资额接近3亿美元，2019年8月12日，知乎宣布完成 F 轮融资，总额4.34亿美元。
创立9年，融资了7次，有几十家公司参股，小编在网上虽然没有查到相关的股权结构，但可想而知里面会有多复杂。融资这么早又这么多次，创始人周源的股份股权肯定会很稀薄，无法像京东的刘强东一样强势主导这个网站。事实也是如此，在网络上，很少关于周源的信息。
这样一来，也就不难理解知乎的质量严重下降了，这么多公司入股，最终目的肯定是要赚钱的，缺少强势的核心人物，就无法主导这个网站的前进方向。为了拉拢更多的用户和更多的点击量，就只能放低身段吸引以前在天涯和贴吧发帖的人进来。
这个趋势，和天涯差不多，一开始，天涯也有很多精英聚集，发表了许多高质量的帖子，吸引了许多读者。来的人多了，因为缺少管理，于是大批人往里面灌水，天涯的内容就每况愈下。几年前，我刚开始接触互联网时，也被天涯吸引了，现在我抛弃它已经有两三年了。
现在的知乎，里面有太多无聊、白痴、垃圾的问题和回答了，一群低素质的网友在吹牛、互相辱骂、瞎编胡扯、炫富，又或者在发广告。请看下面问题和答案：
打个哈欠苍蝇进嘴里了，怎么办啊！在线等急！?
先尝尝是什么味道，爆浆多不多，翅膀和皮柴不柴。通过味道和口感的不同，可以判断出该苍蝇会对你造成什么样的影响，另外最好发张照片，这个症状是需要面诊才能确诊。
当然，请确保症状没有消失，消失了你需要想办法再来一次。
如果蒙宋大战时城头有一挺重机枪（不会坏且子弹无限充足），能改变宋被灭亡的命运吗？
用十亿换你十年牙疼，不能使用任何缓解的手段只能硬抗十年，求死不得，换不换？
土猫该不该吃贵的猫粮？
为什么有些30岁左右的大叔喜欢找年轻的女孩子？
现在的知乎，都已经没有大数据推送了，我刷了几百个问题，几乎都没有一个是我关注的。我之前关注的问题，知乎都没有推送新的答案给我。
可以说，如果知乎没有及时做出改善，以后就是下一个天涯。从知乎的天涯化，我们可以知道，现在如果想做好一个资讯类的网站，最重要的是要做好内容，只有高质量的内容才能持续吸引读者。作为曾经火爆一时的论坛，因为质量太低而迅速衰落就是其中一个很好的例子。
补充拓展：知乎问答采集
他们很多不是专家