Как распредилить диапазон ip?

Question

[Владимир Грабко]

Добрый день. У меня есть диапазон ip, к примеру 127.0.0.1-127.0.225.224. У меня есть 4 машины (которые будут сканить диапазон) мне необходимо поделить этот диапазон на 4 части. Гуглил долго так не чего и не нашел(

На выходе у меня выйдет распределённый сканер портов. Конечно может быть и 2 машины, или вообще милион )

Comments

[Никита]

play.golang.org/p/JlYJXZnUxl что-то типа такого?

[Владимир Грабко]

Никита: да. пишите в ответы. пометку поставлю

Answer 1

[Владимир Грабко]

Спасибо Никита. Немного переделав ваш пример я получил то что хотел.

package main

import (
	"fmt"
	"net"
)

func inet_aton(ip string) (ip_int uint32) {
	ip_byte := net.ParseIP(ip).To4()
	for i := 0; i < len(ip_byte); i++ {
		ip_int |= uint32(ip_byte[i])
		if i < 3 {
			ip_int <<= 8
		}
	}
	return
}

func inet_ntoa(ip uint32) string {
	return fmt.Sprintf("%d.%d.%d.%d", byte(ip>>24), byte(ip>>16), byte(ip>>8),
		byte(ip))
}


func main() {
	ip0 := inet_aton("127.0.0.1")
	ip1 := inet_aton("127.225.225.224")
	
	
	diff := ip1 - ip0
	var parts uint32 = 30
	step := diff/parts 
	
	var ippps string = "0"
	for i := uint32(0); i < parts; i++ {
		//вместо принта шлю зону ботам
		if ippps != "0"{
			fmt.Println(ippps+"-"+inet_ntoa(ip0 + step*i))
		}
	        ippps = inet_ntoa(ip0 + step*i)
	}
	
}

Answer 2

[Никита]

Для IPv4 конвертируем строковые IP в числа, а дальше простая арифметика. Например,
play.golang.org/p/JlYJXZnUxl

Для IPv6 нет встроенного типа uint128, но я уверен, что в нэте можно найти реализацию или из "С" либы (такое уж точно найдётся) переписать для Go.

Answer 3

[Владимир Куц]

Не знаю подробности вашей задачи, но я бы задачу решал как-то так:
на одной машине-мастере запускал бы генератор вроде (код на python):

>>> def get_ip():
...    for a in range(226):
...        for b in range(1,225):
...            ip = '127.0.{a}.{b}'.format(a=a, b=b)
...            yield ip
... 
>>> get_ip()
<generator object get_ip at 0x101d5ea50>
>>> my_ips = get_ip()

А машины-воркеры бы брали очередной адрес после отработки предыдущего как-то так:
>>> next(my_ips)
'127.0.0.1'
>>> next(my_ips)
'127.0.0.2'
>>> next(my_ips)
'127.0.0.3'
>>> next(my_ips)
'127.0.0.4'

И запускайте сканирование хоть на миллионе машин. Такое решение свободно масштабируется на любое количество машин, и равномерно нагружает все воркеры поровну.

Comments

[Владимир Грабко]

у меня сервер получает диапазон ip. Он должен его поравно поделить между воркерами и каждому воркеру отправить свою часть.

[Илья]

Я конечно всё понимаю, но здесь, со своими вопросами, вы уже могли написать программу, которую заказали на фрилансе.

[Владимир Грабко]

FireGM: возможно. Только вот то что я пишу потом залью на гитхаб

[Владимир Грабко]

FireGM: так половину работы сделало сообщество)) Потом в readme напишу ссылки на людей что помогали

[Владимир Куц]

Владимир Грабко: ну во-первых - у вас неравная нагрузка получится. В то время как один воркер по-быстрому уже пробежит всю подсеть, второй застрянет на подсети с долгими таймаутами. Во-вторых - сгенерировать массив хотя бы с использованием той функции что я привел, и побить по индексам на 4 равные части - это из области школьного курса программирования.

[Илья]

Владимир Грабко: вам уже говорили, что каналы это самая настоящая очередь. Поэтому надо в них посылать задания и из них забирать. Можно хоть 100 горутин запустить, они будут брать из канала след. задание. И можно не следить за скоростью выполнения внутри горутины, нагрузка будет размазана по всем процессорам.

[Владимир Грабко]

FireGM: нее. вы меня не так поняли. Я знаю что у меня подключено 30 нод. я знаю какой диапазон необходимо просканировать. сервер делит диапазон на 30 подсетей и каждой ноде на сканирование даёт подсеть.