AWS Machine Learning Blog· Daxeshkumar Patel·· 3 小时前AI 评分34
用 Crawl4AI 为 Amazon Bedrock Knowledge Bases 准备网页内容
Prepare web content for Amazon Bedrock Knowledge Bases with Crawl4AI
AI 导读
针对需要自定义处理的网页源,可用开源 Python 爬虫 Crawl4AI 做预处理,把每页的 Markdown 和元数据 sidecar 写入 Amazon S3,再由 Amazon Bedrock Knowledge Bases 的 S3 数据源摄取。
来源:AWS Machine Learning Blog · aws.amazon.com