什么是运营商大数据，网站APP抓取

标签：帮助   推广   cto   筛选   find   error   自己   not   txt   

自己做的竞价和推广网站访客少如何解决？客户只访问不留联系方式，流失的客户该如何触达？等等。。。这一系列的问题都是做竞价，推广或者很多老板想问或者等待解决的！其实“运营商大数据”就可以帮助全行业“精准获客”，“精准截流”竞价网站，推广网站等平台的流失访客数据，和获取更多的“精准客户数据资源”等。
相关行业和企业可以通过运营商大数据建模实时抓取网站，APP，400电话，固话，小程序，关键词等平台的实时访客，活跃用户，新注册用户，实时来电者，小程序使用者，关键词搜索者等用户的数据信息资源（自己的，同行竞争对手的均可）
还可以筛选地区，年龄，性别，访问次数，访问时长，通话次数，通话时长等维度，去精准定位目标人群。
相关企业可以利用运营商大数据提供的精准客户资源去外呼或者短信直接触达意向客户数据信息，去转化和成交。大大提高行业和企业的转化率和效益。

# coding:utf-8
import re
import requests
import os
import sys
from requests.exceptions import ReadTimeout,HTTPError,RequestException

global data

fw = open("telphone.txt", ‘w‘)

fr = open("urls.txt", ‘r‘)
while 1:
    lines = fr.readlines(1000)
    if not lines:
        break
    for line in lines:
        print(line)

        try:
            r = requests.get(line)
        except ReadTimeout:
        except HTTPError:
        except RequestException:
        else:
            data = r.text
            link_list = re.findall(r"\d+", data)
            for url in link_list:
                if( len(url) == 11 ):
                    #print(url+"\n")
                    if( url[0] == ‘1‘):
                        if( url[1] == ‘3‘ or url[1] == ‘4‘ or url[1] == ‘5‘ or url[1] == ‘7‘ or url[1] == ‘8‘):
                            print(url+"\n")
                            fw.write(url+"\n")
        fw.write("\n")

        link_list2 = re.findall(r"(?<=href=\").*?(?=\")",data)
        for url2 in link_list2:
            try:
                r2 = requests.get(url2)
                #print(r2.status_code)
            except ReadTimeout:
            except HTTPError:
            except RequestException:
            else:
                data2 = r2.text
                link_list3 = re.findall(r"\d+", data2)
                for url3 in link_list3:
                    if(len(url3) == 11):
                        if(url3[0] == ‘1‘):
                            if( url3[1] == ‘3‘ or url3[1] == ‘4‘ or url3[1] == ‘5‘ or url3[1] == ‘7‘ or url3[1] == ‘8‘):
                                print(url3+"\n")
                                fw.write(url3+"\n")
        fw.write("\n\n")

fw.close()

fr.close()

os.system("pause")

推荐文章：三网运营商大数据

什么是运营商大数据，网站APP抓取

标签：帮助   推广   cto   筛选   find   error   自己   not   txt   

原文地址：https://blog.51cto.com/14901278/2522065