��������ժҫ
�ٶȶ�ip���
�ڵ�����ϣ��ը��ʱ������ο��١����شӻ���������������ȡ�м�ֵ����ϣ����ϊ������ҵ���о��ߵ���������֩���������棬��ϊרҵ���������湤�ߣ�����ϊ���ݲɼ�����ĵ������֡����ľ�ϊ���������֩����������ĺ��ĺ��ܣ����ƽ������чʵ�õĺ��ߣ�����������ϣ�����о�������
֩������������ͨ��ָ���ǻ����������棨spider���������������ݲɼ�ϵͳ�����ܹ�ģ�����������ϊ���զ�����������ҳ�棬ץȡ���������ݣ�ϊ�û��ṩ�ṹ�������ݼ���������ͨ���������治ͬ��֩�����������������������ض�������ƻ������ݲɼ�����ч��������ͼ��ж������ơ�
ѡ��һ����ʵ�֩���������棬���ע�����ؼ����ԣ�ץȡ�ٶȡ�����չ�ԡ��������ƹ������լ����ݴ���������������磬һщ��դ������scrapy��ƾ�����첽������ǿ����м��֧�֣���ϊ������ߵ���ѡ���������û��զ�����ȡ�����ʺ���ҫ�߶ȶ��ƻ�����ŀ�������ڷǽ����û������ӻ�������octoparse���ṩ���ѻõij������棬��ͨ����������ɸ�����վ�ijɼ�����
��ʵ��ӧ���у�֩����������ļ�ֵ�������ե��̼۸���ϊ������ҵ�������ö�������ʵʱ�پ������ֵij�ʒ�����������ϣ����ʱ�����������ԡ�ij���۹�˾��ͨ������۽����������֩���������棬ÿ���զ��ɼ���������ʒ���ݣ�ʹ�г�����ч������70%����һ�����������������ݲɼ��ܹ�ֱ���ƶ�ҵ����ߵľ�����
���⣬�����˹����ܼ����ķ�չ���ִ�֩����������խ��խ����������ܽ��������ѧϰ���ܡ����dz����ܴ�����̬ҳ�棬����ӧ��javascript��̬�������ݣ�����ʶ��ͼƭ�е�������ϣ���������ܻ��ݽ�����ؿ������ݲɼ��ı߽磬ʹ�ôӹ�����ҳ����ȡ��ϣ��ø��ӿɿ���ȫ�档
��ȼ��ʹ��֩����������ʱ�������ط��ɷ�������վ��ʹ���������robots.txtэ�飬�����ŀ���������ɹ��ȸ�����������������ƶ�ʡ������û�������ʶ�ǻ�������ҵ�淶��
����������֩������������ϊרҵ�����ݲɼ�������ͨ����ч�������������ȡ������ϊ�û����������ϣ�ھ�ĵ��š��������г����с�ѧ���о����ǿ���������ѡ����ʵ�֩�빤�ߣ��������������������ĵ�·���°빦����