国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

在Python上基于Markov鏈生成偽隨機文本的教程

2020-02-23 00:47:07
字體:
來源:轉載
供稿:網友

 首先看一下來自Wolfram的定義

    馬爾可夫鏈是隨機變量{X_t}的集合(t貫穿0,1,...),給定當前的狀態(tài),未來與過去條件獨立。

Wikipedia的定義更清楚一點兒

    ...馬爾可夫鏈是具有馬爾可夫性質的隨機過程...[這意味著]狀態(tài)改變是概率性的,未來的狀態(tài)僅僅依賴當前的狀態(tài)。

馬爾可夫鏈具有多種用途,現在讓我看一下如何用它生產看起來像模像樣的胡言亂語。

算法如下,

        找一個作為語料庫的文本,語料庫用于選擇接下來的轉換。     從文本中兩個連續(xù)的單詞開始,最后的兩個單詞構成當前狀態(tài)。     生成下一個單詞的過程就是馬爾可夫轉換。為了生成下一個單詞,首先查看語料庫,查找這兩個單詞之后跟著的單詞。從它們中隨機選擇一個。     重復2,直到生成的文本達到需要的大小。


代碼如下
 

import random class Markov(object):   def __init__(self, open_file):  self.cache = {}  self.open_file = open_file  self.words = self.file_to_words()  self.word_size = len(self.words)  self.database()      def file_to_words(self):  self.open_file.seek(0)  data = self.open_file.read()  words = data.split()  return words      def triples(self):  """ Generates triples from the given data string. So if our string were    "What a lovely day", we'd generate (What, a, lovely) and then    (a, lovely, day).  """     if len(self.words) < 3:   return     for i in range(len(self.words) - 2):   yield (self.words[i], self.words[i+1], self.words[i+2])     def database(self):  for w1, w2, w3 in self.triples():   key = (w1, w2)   if key in self.cache:    self.cache[key].append(w3)   else:    self.cache[key] = [w3]      def generate_markov_text(self, size=25):  seed = random.randint(0, self.word_size-3)  seed_word, next_word = self.words[seed], self.words[seed+1]  w1, w2 = seed_word, next_word  gen_words = []  for i in xrange(size):   gen_words.append(w1)   w1, w2 = w2, random.choice(self.cache[(w1, w2)])  gen_words.append(w2)  return ' '.join(gen_words)

為了看到一個示例結果,我們從古騰堡計劃中拿了沃德豪斯的《My man jeeves》作為文本,示例結果如下。
 

In [1]: file_ = open('/home/shabda/jeeves.txt') In [2]: import markovgen In [3]: markov = markovgen.Markov(file_) In [4]: markov.generate_markov_text()Out[4]: 'Can you put a few years of your twin-brother Alfred,who was apt to rally round a bit. I should strongly advocatethe blue with milk'

[如果想執(zhí)行這個例子,請下載jeeves.txt和markovgen.py
馬爾可夫算法怎樣呢?

    最后兩個單詞是當前狀態(tài)。     接下來的單詞僅僅依賴最后兩個單詞,也就是當前狀態(tài)。     接下來的單詞是從語料庫的統(tǒng)計模型中隨機選擇的。
發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板: 夏河县| 麦盖提县| 桐梓县| 上栗县| 甘孜县| 扶沟县| 莆田市| 敖汉旗| 尼勒克县| 阿克陶县| 山阳县| 革吉县| 松桃| 香格里拉县| 丰顺县| 威远县| 贵阳市| 新乡县| 南陵县| 曲麻莱县| 蓝田县| 文化| 潢川县| 印江| 泗阳县| 祁东县| 枝江市| 贡嘎县| 和田县| 比如县| 宁强县| 怀来县| 平乡县| 禄丰县| 兴宁市| 麻江县| 东阿县| 曲松县| 隆安县| 淮滨县| 青田县|