自然语言处理学习（三）：构建中文分词工具

    import xlrd
    import math
    
    
    # TODO：读取字典。
    print("Reading dic...")
    # 获取一个Book对象
    workbook = xlrd.open_workbook("dic.xlsx")
    
    dic_words = []
    
    # 获取一个sheet对象的列表
    booksheet = workbook.sheet_by_index(0)
    
    rows = booksheet.get_rows()
    for row in rows:
    dic_words.append(row[0].value)
    
    print("len:" + str(len(dic_words)))
    
    # 以下是每一个单词出现的概率。为了问题的简化，我们只列出了一小部分单词的概率。 在这里没有出现的的单词但是出现在词典里的，统一把概率设置成为0.00001
    #