爬取豆瓣Top250电影

前言

十一无聊,想着看几部电影来happy一下,不知道有什么精彩电影,于是就爬取一下豆瓣的Top250

项目已经开源到了网站

实现步骤

  1. 爬取页面内容(伪装一个user-agent)
  2. 获取页面内容后使用正则表达式提取自己想要的内容(正则表达式编写)
  3. 将自己提取到的内容存放到数据库中(go的数据持久化)