采集任务怎么拆才方便调度，IP编排的粒度问题
把几百个页面塞进一个任务里跑，成功失败都只看到一个总数，出了问题也不知道卡在哪一段。拆开之后，每一步能不能跑、跑多久、用哪条线路，都能单独看。代理IP在这一层的安排，同样依赖这种拆分。拆到什么粒度粒度…
移动网络的IP地址怎么分，和宽带差在哪
手机上网和家里宽带上网，看起来都是连到互联网，底下的安排方式其实差得挺远。宽带那条线路长期属于一个住址，地址相对稳定；移动网络要支持用户到处走，地址的安排跟着基站的覆盖范围走。这个差别会直接影响代理I…
构建镜像的时候要不要接代理IP
构建镜像的过程里有一段时间是要联网的：拉取基础镜像、下载依赖包、更新系统组件。这一步在国内的机器上经常慢，或者干脆拉不下来。有人会在构建阶段也接上代理IP，把这一段的网络问题解决掉。要不要这么做，取决…
等多久算超时，代理IP任务的等待设置
代理IP任务里的超时设置，是一件很容易被忽略的事。默认值往往能跑通，一旦线路状况变化，问题就集中冒出来：有的任务卡住不动，有的任务反复失败。这个值设得合适，任务跑起来会顺畅不少。理解超时是怎么发生的，…
IP地址为什么会不够用，原因不止一个
地址不够用这件事，背后有几层原因叠在一起。最早的设计里，地址长度定的是三十二位，算下来总数约四十三亿个。这个数字在当年看来绰绰有余，因为那时能接入网络的设备只有大型机和少量工作站。后来个人电脑普及、手…
一个网段能装多少台设备，IP容量怎么算
一个网段能装多少台设备，答案藏在可用位数里。地址总长固定，留给设备编号的位数越多，能排出来的组合就越多，能容纳的台数也越多。反过来，位数少一位，容量就按一半一半往下掉。这个关系是纯算术，不涉及设备性能…
IP处在网络模型的哪一层，上下各是谁
把四层摊开来看，地址的位置是明确的：它属于负责找路的那一层，也就是网络层。往上一层关心的是连接和端口，往下一层关心的是物理介质上的收发。这三层各自用不同的标识：上面用端口区分同一台设备上的不同服务，中…
IP地址注册机构分五个地区，各自管哪一块
顶层的规则定好之后，具体到每个地区由谁来发，靠的是一组地区性的机构。这样的机构一共有五个，各自负责一块地理范围，彼此之间不重叠。一个地址属于哪个机构，由它所在的地理范围决定，跟持有人搬到哪没有关系。这…
同一个网络里互传文件，走的是哪一个IP
同一个网络里两台设备互传文件，走的是各自的内部地址，数据不经过对外那一层，也不占用对外的带宽通道。所以传大文件的时候，家里其他人的上网速度不受影响，传输进度却能跑得很快。理解这一点，就能解释为什么同样…
家里几台设备同时上网，对外的IP为什么只有一个
家里手机、电脑、电视同时在线，各拿一个内部地址，各跑各的。但从外面看，这些设备发出的请求全都来自同一个地址。中间那台负责分配的设备同时兼任转换的角色，把内部地址换成一个对外可用的，再把回来的数据分发给…