原创 RL的分類

文章目錄RL算法的分類1. 分類標準一2. 分類標準二2.1 基於model-free的分類標準二Policy OptimizationQ-LearningOn-policy 和 Off-policy RL算法的分類 1. 分類

原创 RL中的關鍵概念

文章目錄1. States and Observations2. Action Spaces3. Policies3.1 確定性的策略(Deterministic Policies)3.2 隨機性的策略4. Trajectorie

原创 源碼閱讀-CVAE模型

文章目錄數據處理相關數據說明1、dialog2、meta3、utt詞庫構建1、vocab及rev_vocab2、 topic_vocab及rev_topic_vocab3、 dialog_act 及 rev_dialog_act_

原创 CH2-NLG應用之【機器翻譯non-auto-regressive版】

2018年,Gu等人提出了一種新的機器翻譯模型,這種模型不用再從左到右的順序依次翻譯了,使得翻譯過程可以並行化。 模型本身依然是基於Transformer的,不同的是在測試時可以並行解碼。模型結構如下圖所示: 把並行計算結果時,

原创 閱讀筆記-ShowandTell

文章目錄摘要相關工作提出的模型3.1 基於LSTM的句子生成器 摘要 提出了一個生成模型,cv+nlp,輸入是圖片,輸出是句子 衡量指標 BLEU-1 SBU 相關工作 Kiros這個人用一個 只有前向傳播的神經網絡,根據輸

原创 閱讀筆記-美團NLG信息流

文章目錄1、如何去衡量優化效果?2、應用形態2.1 面向內容2.2 面向商戶3、具體技術3.1 文本生成3.2 文本建模4、實踐4.2 商戶文案4.2.1 商戶表示4.2.2 控制端實現賣點控制風格控制4.3 內容聚合多樣性控制實

原创 代碼閱讀-官方tf版BeamSearch

文章目錄0. BasicSeq2Seq1.Bridge類1.1 ZeroBridge1.2 PassThroughBridge1.3 InitialStateBridge2. BeamSearchDecoder類2.1 step中

原创 閱讀筆記-基於用戶搜索日誌的商品標題壓縮

文章目錄數據集模型第一個任務:生成輸出Point network模型第二個任務是生成搜索`query`將兩個任務合併 原文鏈接 數據集 S:淘寶女裝所有商品標題,剔除標題長度小於10的,因爲大多標題都小於10. T:達人平

原创 如何閱讀一份源代碼

文章讓我收穫頗深。 理清數據結構之間的關係。 反覆讀了好多遍,試圖在leveldb源碼閱讀上有一點收穫。但是目前還是失敗的。

原创 閱讀筆記-基於用戶日誌的標題生成

文章目錄問題類型傳統種類不足改進點 原文鏈接 問題類型 轉化爲抽取式摘要生成任務:從原來標題中提取出若干更短的標題,更能促成成交轉化。 傳統 傳統抽取式壓縮方法分兩步執行: 分詞,NER,調詞權重 限制性優化(如knapsack

原创 論文閱讀-基於LSA的摘要生成

文章目錄簡介1、句子向量化1.1 權重選擇1.1.1 局部權重1.1.2 全局權重2、SVD過程3、摘要生成過程4、個人理解 原文《Generic Text Summarization Using Relevance Measur

原创 【leveldb源碼閱讀】之LOG

理清leveldb基本架構圖之後,我又標出了一些比較重要(主要因爲我是小白)的信息點,如下: [comment<>(在代碼 [db/filename.h]可以看到leveldb的幾種文件類型) // Owned filename

原创 leveldb源碼閱讀—status

在閱讀log文件的時候,會發現使用了Status這個類,可以用它來得到函數返回的狀態,比如: Status s = Function(); if (!s.ok()) return false; return true 今天就來認

原创 tornado處理表單提交的中文數據

文章目錄背景描述解決方法學習筆記 背景描述 前端通過表單提交了帶有中文的數據,後端想對這些數據進行處理。request.body是一個binary變量,雖然可以將之解碼爲utf8但仍然不是中文形式,類似於 %E8%BF%98%E6

原创 學習筆記-Transformer中注意力機制

文章目錄transformer框架相關鏈接 transformer框架 之前對《Attention is all your need》中的框架結構一直不理解,讀了很多相關的介紹也是迷迷糊糊的。今天又理了一遍相關的知識點,主要是各個