盗版问题。
“我研究了,现在的小说网站有防复制功能,但技术还是差点,缺少反爬虫技术。盗版网站直接利用爬虫,就能强行把内容扒下来,挂在自家网站上。”
郭鹏飞现在是网络媒体事业部的总裁,旗下的核心业务就是今日头条,也包括头条文学、微知和糗事百科。
周不器不太理解。
郭鹏飞就给解释了一下。
这其实跟搜索引擎的爬虫技术一样。比如百度和微点合作,屏蔽了所有同行搜索引擎,反对别的搜索引擎抓取百度知道、百度百科、微点百科、微点知道等自家生态内容。
这对别的搜索引擎就是致命打击。
但这里有一个问题。
爬虫协议是一个君子协议。
百度和微点说:“同行们,我把你们加黑名单了,不许来爬取我们的内容了。”然后,同行们就遵守约定,就不爬取了。
这是一个承诺屏蔽,而不是技术屏蔽。
内容未完,下一页继续阅读