linux  使用 curl shell 命令抓取 网页

-A  表示模拟浏览器发送报文

-e  表示 很重要 表示 模拟 来路，表示 这个访问 是从指定 的链接 点过去的。

  1 #!/bin/bash
  2 
  3 URL='http://www.kuaidi100.com/query?type=yuantong&postid=7595512801&id=&valicode='
  4 BRO="Mozilla/4.0 (compatible; MSIE 5.01; windows NT 5.0)"
  5 LY='www.kuaidi100.com'
  6 curl -A "$BRO" -e "$LY" $URL
  7 echo \n