Files
msh-system/msh_crmeb_22/documents/data_spider.md

1.1 KiB
Raw Blame History

采集数据任务:

任务1.采集数据到食物成分表

数据源:http://www.ishen365.com/index.php/swcfbv2_foods

任务2.采集“营养素”数据到表v2_knowledge并根据数据生成批量insert的sql语句

数据源:http://www.ishen365.com/index.php/rsyysv2_knowledge type=nutrients

任务3.采集“科普文章”数据到表v2_knowledge 并根据数据生成批量insert的sql语句

数据源1http://www.ishen365.com/index.php/article/scienceteachv2_knowledge type=article 数据源2http://www.ishen365.com/index.php/wiki 中前100条数据v2_knowledge type=guide 数据源3http://www.ishen365.com/index.php/article/doctornews 中前100条数据v2_knowledge type=article

任务4.采集“食谱”到表v2_recipes

数据源:http://www.ishen365.com/index.php/article/godkitchenv2_recipes食谱表

任务5.采集数据到表表v2_community_posts社区内容表

数据源:http://www.ishen365.com/wiki中前200-500条数据v2_community_posts社区内容表