goMeikongSpider一个利用golang语言实现抓取美空网模特信息的简单网络爬虫About这个项目主要用于增强自己对于golang和MongoDB2.6.4的掌握程度,顺便学习一下WebSocket等其他的web开发技术RequireGolang1.4.2MongoDB2.6.4BootstrapV3WebSocketjQuery1.11.0Features从美空网抓取模特图片,将模特信息存入MongoDB2.6.4数据库中,将模特图片下载存放到本地目录中利用WebSocket来实时的显示爬虫抓取模特的信息以分页的方式显示模特照片ToDo将爬虫的抓取过程修改为并发实现,缩短爬虫抓取的时间将Http请求的路由过程更改为统一的路由处理,避免在程序中定义过多的处理函数提供REST方式的对外Web Service接口利用美空网的账号进行模拟登录,从而对每个模特抓取完整的图片对模特照片进行添加评论与显示Display爬虫操作页面模特列表页面