您的位置：首页 > 脚本大全 > > 正文

python ip代理池（Python 实现域名解析为ip的方法）

更多时间：2022-04-02 10:51:53 类别：脚本大全浏览量：1303

python ip代理池

Python 实现域名解析为ip的方法

今天得了一批域名，需要把域名解析成ip

因为量比较大所以采用了多进程和队列的方式

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66 from multiprocessing import Process,Queue,Pool

import socket

import multiprocessing

import os

#写入文件

def write(q,lock，filename):

while not q.empty():

url = q.get()

print (url)

try:

ip = socket.gethostbyname(url)

except:

ip = "unknow"

print (ip)

with open(filename,'a+') as f:

lock.acquire() #加锁防止多个进程写入会混乱

try:

f.write(url + " " + ip + "\n")

finally:

lock.release()

#添加到队列

def readurl(q,n):

with open(str(n)+'.txt','r') as f:

lines = f.readlines()

for line in lines:

q.put(line.strip())

return q

#根据进程进行拆分txt

def multi(urllist,n):

with open(urllist,'r') as f:

lines = f.readlines()

line = int(len(lines)/n)

print (line)

for m in range(0,n):

with open(str(m)+'.txt','a+') as f1:

for i in range(line*m,line*(m+1)):

f1.write(lines[i])

#删除拆分的txt文件

def remove(n):

for i in range(0,n):

os.remove(str(i)+'.txt')

print ("######清除临时文件######")

if __name__ == "__main__":

manager = multiprocessing.Manager()

q = manager.Queue()

lock = manager.Lock()

m = 5 #设置扫描进程数

urllist = "url.txt" #待解析的url

filename = "test.txt" #结果保存的文件名

multi(urllist,m)

p = Pool(m)

for i in range(m):

p.apply_async(write,args=(readurl(q,i),lock,filename))

p.close()

p.join()

remove(m)

print ("#######全部文件采集完成########")

以上这篇Python 实现域名解析为ip的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持开心学习网。

原文链接：https://blog.csdn.net/qq1124794084/article/details/80534678

标签：Python IP 域名解析

上一篇：python在txt指定行添加文本（Python修改文件往指定行插入内容的实例）

下一篇：elementuivue使用技巧（Vue Element前端应用开发之常规Element界面组件）

您可能感兴趣

python ip代理池（Python 实现域名解析为ip的方法）

python ip代理池

热门推荐

排行榜