typesense/docsearch-scraper 使用记录

2021/12/12 23:22:25

本文主要是介绍typesense/docsearch-scraper 使用记录,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

概括:

1、使用 typesense/docsearch-scraper 抓取网站内容,制作索引
2、网站中添加 UI 组件,在搜索时请求制作的数据索引
3、定时抓取网站内容,更新索引

过程:

1、安装并运行 Typesense

docker pull typesense/typesense:0.22.1
export TYPESENSE_API_KEY=xyz
mkdir /tmp/typesense-data
docker run -p 8108:8108 -d -v/tmp/typesense-data:/data typesense/typesense:0.22.1 --data-dir /data --api-key=$TYPESENSE_API_KEY

Typesense 健康检查

curl http://localhost:8108/health

2、安装 jq

https://stedolan.github.io/jq/download/

centos:yum install jq

3、typesense - .env

vim /path/typesense/.env

TYPESENSE_API_KEY=xyz
TYPESENSE_HOST=xxx.a1.typesense.net
TYPESENSE_PORT=443
TYPESENSE_PROTOCOL=https

4、typesense - config.json

vim /path/typesense/config.json

config.json 内容格式参考【 https://github.com/algolia/docsearch-configs 】

5、安装并运行 typesense/docsearch-scraper

docker run -d --env-file=/path/typesense/.env -e "CONFIG=$(cat /path/typesense/config.json | jq -r tostring)" typesense/docsearch-scraper



这篇关于typesense/docsearch-scraper 使用记录的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!


扫一扫关注最新编程教程