天天看點

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

第一部分 DeepDive 知識抽取實戰

注意:iDeepDive 僅支援Liux或者Mac,不支援Windows。

1.1 工程組成

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

1.2 先驗資料導入

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

1.3 待抽取文章導入

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

1.4 流程

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

1.5 文章資料預處理

對文章進行自然語言處理,包括分詞、詞性标注、命名實體識别等操作。

在app.ddlog 中利用nlp.markup.sh 這個腳本去實作NLP的處理,并将内容放入到sentences 表中。

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

1.6 候選實體抽取

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

候選實體對生成

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

關系特征抽取

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

資料标注

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

因子圖建構

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰
王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

總結

這個項目僅僅聽老師講,很難懂這個過程。還需要自己親自實踐,才能真正了解。

王昊奮知識圖譜學習筆記--第三講知識抽取與知識挖掘(下)第一部分 DeepDive 知識抽取實戰

繼續閱讀