日韩天天综合网_野战两个奶头被亲到高潮_亚洲日韩欧美精品综合_av女人天堂污污污_视频一区**字幕无弹窗_国产亚洲欧美小视频_国内性爱精品在线免费视频_国产一级电影在线播放_日韩欧美内地福利_亚洲一二三不卡片区

SWJ小談:中文分詞的作用與概述-說教篇_SEO優(yōu)化教程

編輯Tag賺U幣
教程Tag:暫無Tag,歡迎添加,賺取U幣!

推薦:給Google提交視頻Sitemap
Google治理員工具中所支持的Sitemap種類達到了四種,其中包括這種VideoSitemap,主要是給那些視頻較多的網(wǎng)站,或者視頻寄放網(wǎng)站所用。提交的方法同普通的通用s

隨著信息的飛速增長,使搜索引擎成為人們查找信息的首選工具,Google、百度、yahoo、最近新出的網(wǎng)易的有道 等大型搜索引擎一直是人們討論的話題。

隨著搜索市場價值的不斷增加,越來越多的公司開發(fā)出屬于自己的搜索引擎,阿里巴巴的商機搜索、8848的購物搜索等也陸續(xù)面世,自然,搜索引擎技術也成為技術人員關注的熱點之一。

搜索引擎技術的研究,國外比中國要早近十年,從最早的Archie,到后來的Excite,以及altvista、overture、google等搜索引擎面世,搜索引擎發(fā)展至今,已經(jīng)有十幾年的歷史,而國內開始研究搜索引擎是在上世紀末本世紀初。在許多領域,都是國外的產(chǎn)品和技術一統(tǒng)天下,非凡是當某種技術在國外研究多年而國內才開始的情況下。例如操作系統(tǒng)、字處理軟件、瀏覽器等等,但搜索引擎卻是個例外。雖然在國外搜索引擎技術早就開始研究,但在國內還是陸續(xù)涌現(xiàn)出優(yōu)秀的搜索引擎,像百度(http://www.baidu.com)、和最近剛出的 有道(http://www.youdao.com)等。目前在中文搜索引擎領域,國內的搜索引擎已經(jīng)和國外的搜索引擎效果上相差不遠。但是SWJ認為其技術能力等方面還是相差國外先進水平有一定的距離 不過,這距離在慢慢的拉近中! 談到搜索引擎的分詞技術之所以能形成現(xiàn)在這樣的局面,有一個重要的原因就在于中文和英文兩種語言自身的書寫方式不同。

什么是中文分詞?

眾所周知,英文是以詞為單位的,詞和詞之間是靠空格隔開,而中文是以字為單位,句子中所有的字連起來才能描述一個意思。例如,英文句子I am a student,用中文則為:“我是一個學生”。計算機可以很簡單通過空格知道student是一個單詞,但是不能很輕易明白“學”、“生”兩個字合起來才表示一個詞。把中文的漢字序列切分成有意義的詞,就是中文分詞,有些人也稱為切詞。我是一個學生,分詞的結果是:我 是 一個 學生。

中文分詞和搜索引擎關系與影響!

中文分詞到底對搜索引擎有多大影響?對于搜索引擎來說,最重要的并不是找到所有結果,因為在上百億的網(wǎng)頁中找到所有結果沒有太多的意義,沒有人能看得完,最重要的是把最相關的結果排在最前面,這也稱為相關度排序。中文分詞的準確與否,經(jīng)常直接影響到對搜索結果的相關度排序。筆者最近替朋友找一些關于日本和服的資料,在搜索引擎上輸入“和服”,得到的結果就發(fā)現(xiàn)了很多問題。

小談:中文分詞技術

中文分詞技術屬于 自然語言處理技術范疇,對于一句話,人可以通過自己的知識來明白哪些是詞,哪些不是詞,但如何讓計算機也能理解?其處理過程就是分詞算法。

現(xiàn)有的分詞算法可分為三大類:基于字符串匹配的分詞方法、基于理解的分詞方法和基于統(tǒng)計的分詞方法。

1、基于字符串匹配的分詞方法

這種方法又叫做機械分詞方法,它是按照一定的策略將待分析的漢字串與一個“充分大的”機器詞典中的詞條進行配,若在詞典中找到某個字符串,則匹配成功(識別出一個詞)。按照掃描方向的不同,串匹配分詞方法可以分為正向匹配和逆向匹配;按照不同長度優(yōu)先匹配的情況,可以分為最大(最長)匹配和最�。ㄗ疃蹋┢ヅ洌话凑帐欠衽c詞性標注過程相結合,又可以分為單純分詞方法和分詞與標注相結合的一體化方法。常用的幾種機械分詞方法如下:

1)正向最大匹配法(由左到右的方向);

2)逆向最大匹配法(由右到左的方向);

3)最少切分(使每一句中切出的詞數(shù)最小)。

還可以將上述各種方法相互組合,例如,可以將正向最大匹配方法和逆向最大匹配方法結合起來構成雙向匹配法。由于漢語單字成詞的特點,正向最小匹配和逆向最小匹配一般很少使用。一般說來,逆向匹配的切分精度略高于正向匹配,碰到的歧義現(xiàn)象也較少。統(tǒng)計結果表明,單純使用正向最大匹配的錯誤率為1/169,單純使用逆向最大匹配的錯誤率為1/245。但這種精度還遠遠不能滿足實際的需要。實際使用的分詞系統(tǒng),都是把機械分詞作為一種初分手段,還需通過利用各種其它的語言信息來進一步提高切分的準確率。

分享:通過SEO高效進行海外推廣
說到海外推廣,可能大家也不會生疏,在這里也有許多做外貿、做英文站的朋友。一般來說,海外推廣主要有這些推廣方式,如:B2B平臺,email營銷,國際展會,黃頁

共2頁上一頁12下一頁
來源:模板無憂//所屬分類:SEO優(yōu)化教程/更新時間:2007-12-28
相關SEO優(yōu)化教程