知识图谱相关的操作

 

微软生成自己的图谱：GitHub - microsoft/SmartKG: This project accepts excel files as input which contains the description of a Knowledge Graph (Vertexes and Edges) and convert it into an in-memory Graph Store. This project implements APIs to search/filter/get nodes and relations from the in-memory Knowledge Graph. This project also provides a dialog management framework and enable a chatbot based on its knowledge graph.

推荐算法的数据集有：(10条消息) 16个推荐系统开放公共数据集整理分享_hellozhxy的博客-CSDN博客_数据集推荐

关于推荐算法知识图谱的数据集：

一  Neo4j图数据库介绍

用的人最多，与python好交互。

Neo4j-CQL教程  https://www.w3cschool.cn/neo4j/neo4j_cql_introduction.html

下载安装SDK，neo4j

启动：

1.在cmd窗口启动

启动命令为

neo4j.bat console

2.启动信息为如下 

3. 复制上图的 启动地址到浏览器

http://localhost:7474/

 出现如下画面，说明启动成功

二.可视化例子演示

三 知识图谱构成的流程

知识图谱生成流程

（1）数据获取：利用网络爬虫技术从天猫网、淘宝网等电商类网站获取商品详情数据、用户评论数据。

（2）信息转化：信息转化的对象主要是半结构化的商品详情数据，包括商品、店铺、品牌等实体、关系和属性。电商类网站的商品详情数据按照信息组织的规范进行编辑与展示，本文首先根据网页结构设计商品知识图谱的模式层，并通过制定规则模板完成数据层的信息转化与导入。

（3）数据预处理：数据预处理的对象主要是非结构化的用户评论数据，首先对所有数据进行数据去重、数据筛选、数据清洗等基础工作。然后基于用户观点挖掘，采用文本标注的方式将不同数据类型进行区分，为后续工作提供支持。

（4）实体识别：旨在识别非结构化文本中的实体单元，包括穿搭、颜色、价格、质量、情感正负等。本文通过BERT-BiLSTM-CRF的深度学习模型完成实体识别，并经过实验对比验证了方法的可靠性。

BERT-BiLSTM-CRF的深度学习模型

【精选】Bert-Bilstm-CRF基线模型详解&代码实现_suibianshen2012的博客-CSDN博客

命名实体识别模型BERT-Bi-LSTM-CRF - 知乎 (zhihu.com)

（5）关系抽取：旨在抽取非结构化文本中实体单元之间的关系，主要是建立评价对象单元与情感倾向单元之间的联系。本文通过实体类别特征、依存句法特征结合的方式完成关系抽取。

（6）实体融合：利用评价单元的上下文语义关系完成实体对齐，主要是消除用户评论的歧义性，规范语义表达。本文通过Word2Vec词向量获得实体单元的语义特征，采用余弦相似度的计算方式比较实体间相似度，设定阈值完成实体融合。

（7）知识图谱存储：旨在将上述步骤中得到的<实体，关系，实体>的三元组结构存储到基于Neo4j的知识图谱中，完成知识图谱构建。

四 例子

neo4j-admin import --database=energy.db --nodes F:\neo4j-community-4.4.5\import\actors.csv --nodes F:\neo4j-community-4.4.5\import\movies.csv --relationships F:\neo4j-community-4.4.5\import\roles.csv

neo4j-admin import --database=products.db --nodes F:\neo4j-community-4.4.5\import\actors.csv --nodes F:\neo4j-community-4.4.5\import\movies.csv --relationships F:\neo4j-community-4.4.5\import\roles.csv

neo4j-admin import -database=products.db  

--nodes::first D:\neo4j\neo4j-community-5.2.0\import\first.csv 

--nodes:second D:\neo4j\neo4j-community-5.2.0\import\second.csv 

--nodes:product D:\neo4j\neo4j-community-5.2.0\importproduct.csv 

--nodes:review D:\neo4j\neo4j-community-5.2.0\import\review.csv 

--nodes:person D:\neo4j\neo4j-community-5.2.0\import\person.csv 

--relationships:subcategory_of D:\neo4j\neo4j-community-5.2.0\import\first_second.csv 

--relationships:product_of D:\neo4j\neo4j-community-5.2.0\import\second_product.csv

--relationships:review_on D:\neo4j\neo4j-community-5.2.0\import\review_product.csv

--relationships:review_of D:\neo4j\neo4j-community-5.2.0\import\person_review.csv

--skip-duplicate-nodes=true --skip-bad-relationships=true --stacktrace --bad-tolerance=50000000

————————————————
版权声明：本文为CSDN博主「只需倾心」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/qq_45092476/article/details/128085903