google搜这里用本论坛作为关键词直接可以搜到,还排名第一,yahoo中文版要用严格匹配搜可以搜到,百度根本没有收录本坛子,当然搜不到。这个现象很有趣,google是美国白人办的,它讲求的是求真的精神,严格忠实于你的关键词,力求最匹配,而不看你这个网站的影响度大小,流量大小,甚至出资多少;百度是在华的美籍华人办的,主攻面是中国大陆地区,其路数是完全中国化的,特点是趋炎附势,无利不起早。没有备案的不收录,影响小的排名后,献金大的排名前;yahoo是美籍华人办的,基本面在欧美,所以折衷,有欧美求真的一面,也有华人趋利的一面。下图是07年11月5日我用google搜索本博客的结果,但是我还没租服务器,坛子就建在家里台式机上,用了别人的免费域名上线而已,google不到一个月就能搜到,目前本博客的管理员是07年11月3日注册的。
其实啊,百度这么个搞法路会越走越窄的。别人让你搜索当然是越准越全越好,把挑选和判断的权力和机会留给他们自己。他们没有接受你百度的判断的需求,也没有结识你七大姑八大姨的兴趣。下图是08年月15日用google和百度搜索“地沟油”关键字的结果:
看见了吧,google搜出的是地沟油的新闻,也符合大家对地沟油危害的恐惧;百度搜出的是如何生产地沟油的技术转让广告,如果这是网民自然搜索的结果,我也无话可说,国人素质堪忧而已,可排名前五的全是推广网站,也即靠给百度付费搞竞价排名得以排在最前面的,不是我们国人最关心如何生产地沟油!
果然7年后百度就出了魏则西事件。
现在(2021年)的互联网更糟糕了,它已经沦为和广播电视一样的被大厂把控的媒体,早期互联网那种全民参与,以分享为核心精神的状况已经不在了,现在的互联网已经让个人发声成为不可能。就像电视上所有未付费的产品都被遮住商标一样,个人网站已经没有机会被搜录了。过去我很痛苦各个搜索引擎的爬虫到我网站后台爬来爬去,我还费尽心机地去想办法屏蔽它们,现在倒好,我请它们来爬都请不来了。现在的内容大厂和搜索引擎大厂已经紧密共享数据库了,要搜索直接去大厂数据库搜,才不会全互联网撒大网呢,既低效又浪费算力和电费。我同一篇文章投靠大厂,发在微信订阅号上马上就能被搜录,发在自己的博客上一个半月后还是搜不到。如果把互联网比作社会的话,那现在的互联网是豪强社会,不再是公民社会。如果以股市做类比的话,20年前的互联网是我们的沪深A股,散户为主;现在的互联网是美国股市,机构为主,完成了去散户化。过去的互联网是沙龙,每个人既是发布者也是倾听者,现在的互联网是大卖场,想要发布商品信息,想让大卖场给你按个指路牌,请先把摊位费交了,否则你就只能当个顾客。
如果现在有豪富举义旗,反其道而行之,重新搞一个以20年前搜索理念,也即以搜索客为中心,严格按匹配度优先,发布时间倒序排列搜索结果的,不向用户灌输价值观的搜索引擎就好了,老子付费搜索都行,一次5毛,或者包年30圆都中。现在“云起云涌”,算力严重过剩,我是既没资金,也没开发搜索引擎的水平,否则这事儿我就干了,一定是社会效益和经济效益双丰收。
从google和百度对本坛子的搜索行为看中美文化差异(旧文翻新)
Re: 从google和百度对本坛子的搜索行为看中美文化差异(旧文翻新)
又过去三年了,现在的情况是只有微软的必应搜索(bing)还在干老本行,还在每天固定时间发爬虫爬我这样的低价值网站,不得不说他们的效率还挺高的,我这旮旯才开张一周多,就已经被收录了,还扒拉了10大页。我还一分钱没花,一点儿针对他们的优化都没做(其实我也不会弄)。
而其它所谓的搜索巨头们已经完全无视我这样的网站了,精力都集中到大网站和付费用户上去了,这从商业的角度说无可厚非。而从经典的互联网精神来说,必应(bing)更值得赞许而已。
而其它所谓的搜索巨头们已经完全无视我这样的网站了,精力都集中到大网站和付费用户上去了,这从商业的角度说无可厚非。而从经典的互联网精神来说,必应(bing)更值得赞许而已。
勇于在所有领域发挥理性
Re: 从google和百度对本坛子的搜索行为看中美文化差异(旧文翻新)
上面的帖子写了后,百度的爬虫马上就来爬了,我认为这是巧合吧。百度的爬虫就来了2~3天,必应爬虫天天到。现在用百度搜老橙子草堂,第二位就是这里的首页链接,还是很不错的。而用必应搜老橙子草堂,那乌泱乌泱地给出十六页的结果,把我给扒得啊,底儿掉,那叫一个敞亮啊,犄角旮旯都明盘了。
从良心说我是很感谢必应的,太给面子了,我自认它客观上给我很大的鼓励和认可。但从理性上说它展示结果的方式稍有不妥之处。相比之下,百度的做法还更规范呢。用户搜这里,把主页的链接给出来就可以了,不必蔓延十几页。把选择主动权交给用户,不用过分热忱。
当然,由于爬得彻底,搜本网的一些帖子,比如“http3终于成了”,在必应是可以搜到的,而百度就根本没收录。谢谢必应,而上文我还提了必应的意见,有点儿矫情了。呵呵。
从良心说我是很感谢必应的,太给面子了,我自认它客观上给我很大的鼓励和认可。但从理性上说它展示结果的方式稍有不妥之处。相比之下,百度的做法还更规范呢。用户搜这里,把主页的链接给出来就可以了,不必蔓延十几页。把选择主动权交给用户,不用过分热忱。
当然,由于爬得彻底,搜本网的一些帖子,比如“http3终于成了”,在必应是可以搜到的,而百度就根本没收录。谢谢必应,而上文我还提了必应的意见,有点儿矫情了。呵呵。
勇于在所有领域发挥理性
Re: 从google和百度对本坛子的搜索行为看中美文化差异(旧文翻新)
发现了一个有趣的现象,那就是中外搜索引擎都没收录我的老橙子说《论语》内容。按理说这个帖子是我网站中体量最大的帖子,不可能爬不到的,可必应把这里基本都收录了,但就是一页老橙子说《论语》也没收。百度就更是如此了。看来不收录来路不明的经典解说网页是它们共同的潜规则。呵呵,可惜了啊。
勇于在所有领域发挥理性
Re: 从google和百度对本坛子的搜索行为看中美文化差异(旧文翻新)
火了,今天用必应搜索,可以搜到老橙子说论语了。寂默心流 写了: 2024-05-21 15:37 发现了一个有趣的现象,那就是中外搜索引擎都没收录我的老橙子说《论语》内容。按理说这个帖子是我网站中体量最大的帖子,不可能爬不到的,可必应把这里基本都收录了,但就是一页老橙子说《论语》也没收。百度就更是如此了。看来不收录来路不明的经典解说网页是它们共同的潜规则。呵呵,可惜了啊。
外国的搜索引擎都能对中国的网站做到从善如流,不断改善自己的收录工作,可国内的搜索引擎呢,百度和360搜索根本就没收录这里,一则也没有。而且之前,大概一个月前的百度是收录过这里的。有一种说法,国内的搜索引擎在清理收录内容,没备案的网站一律不收。可我这里是双重备案,妥妥的。
寒心。我当然知道收录了也没什么卵用。但作为备案手续完备的中国网站,中国的搜索引擎不收,国外的,包括那些被墙的国外引擎却收了个满坑满谷,说不过去啊!
勇于在所有领域发挥理性