“一带一路 大数据”的版本间的差异
来自CloudWiki
(→技术资源) |
(→数据爬取) |
||
第26行: | 第26行: | ||
*微博爬取:[https://blog.csdn.net/qq_38316655/article/details/80671358 Python爬虫实列:新浪微博热门话题] | *微博爬取:[https://blog.csdn.net/qq_38316655/article/details/80671358 Python爬虫实列:新浪微博热门话题] | ||
*BeuatifulSoup库的使用:https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/ | *BeuatifulSoup库的使用:https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/ | ||
+ | *爬取豆瓣前9000条电影:https://mp.weixin.qq.com/s?__biz=MjM5MjAwODM4MA==&mid=2650726517&idx=1&sn=b7fd876df2f8515983b28bfcfeb1d9e7&chksm=bea691a689d118b051c1244380193c4e5755d9cd0f92d3a50baa2d96c05745e903fffc6f15a3&mpshare=1&scene=23&srcid=&sharer_sharetime=1566137513375&sharer_shareid=9a47d948e5a338ea483d560dfedff359#rd | ||
+ | |||
===后台引擎=== | ===后台引擎=== | ||
*[[一带一路__运维]] | *[[一带一路__运维]] |
2019年9月20日 (五) 22:57的版本
目录
进度
- 电商淘宝数据 ?
- 数据清洗 ?
- 电影数据 ?
- 一带一路 核心节点(网站)?
- selenium 处理验证码:https://blog.csdn.net/Lionel_Qin/article/details/80969868
- 首页新闻 :(随机、推荐)模式,向用户推荐个性化的一带一路新闻
- Spark训练推荐
数据
- 海囤全球:https://www.jd.hk/
- 天猫国际馆:
技术资源
云服务器
数据爬取
- 视频:Python爬虫(入门+进阶)
- 文档:Python爬虫入门进阶
- 微博爬取:Python爬虫实列:新浪微博热门话题
- BeuatifulSoup库的使用:https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/
- 爬取豆瓣前9000条电影:https://mp.weixin.qq.com/s?__biz=MjM5MjAwODM4MA==&mid=2650726517&idx=1&sn=b7fd876df2f8515983b28bfcfeb1d9e7&chksm=bea691a689d118b051c1244380193c4e5755d9cd0f92d3a50baa2d96c05745e903fffc6f15a3&mpshare=1&scene=23&srcid=&sharer_sharetime=1566137513375&sharer_shareid=9a47d948e5a338ea483d560dfedff359#rd
后台引擎
- 一带一路__运维
- Django搭建网站
- ElasticSearch入门
- Django中文教程
- ElasticSearch教程
- Kibana安装和简单使用
- Django结合ES :https://www.jianshu.com/p/cd3d60da3128
数据可视化
- Echarts2.0:https://echarts.baidu.com/echarts2/doc/example.html
- Echarts4.0: https://echarts.baidu.com/index.html
- Echarts素材:http://www.17sucai.com/search/echarts?
- StoryMap互动地图:https://cn.gijn.org/2019/06/07/stroymap/
人工智能
- DuerOS开放平台:https://developer.dueros.baidu.com/open
一带一路国家一览
东南亚
南亚
西亚北非
- 沙特阿拉伯
- 阿联酋
- 阿曼
- 伊朗
- 土耳其
- 以色列
- 埃及
- 科威特
- 伊拉克
- 卡塔尔
- 约旦
- 黎巴嫩
- 巴林
- 也门共和国
- 叙利亚
- 巴勒斯坦
- 半岛电视台中文网:https://chinese.aljazeera.net/economy
- 中非日报:http://www.ljmqc.com/
中东欧
- 波兰
- 罗马尼亚
- 捷克共和国
- 斯洛伐克
- 保加利亚
- 匈牙利
- 拉脱维亚
- 立陶宛
- 斯洛文尼亚
- 爱沙尼亚
- 克罗地亚
- 阿尔巴尼亚
- 塞尔维亚
- 马其顿
- 波黑
- 黑山
- 北欧华人网:http://www.cmeds.se/bohrb/portal.php
- 西班牙华人网:http://www.laicw.com/