�� 1�� �����ɼ��c�A̎������

1.1 �����ɼ�����

1.1.1 �����ɼ��Ĺ���

1.1.2 ���x��ԭ���c���

1.1.3 �W�j���x��������

1.1.4 ���x�đ��È���

1.2 �����A̎������

1.2.1 �����A̎����Ŀ���c���x

1.2.2 �����A̎��������

1.2.3 �����A̎���Ĺ��߽�B

1.3 Python�����ɼ��c�A̎�����Î�

1.3.1 Ո���

1.3.2 ������

1.3.3 �����惦��

1.3.4 ̎���

1.4 ���}

�� 2�� �����ɼ��c�惦

2.1 ��������c�ٿv

2.1.1 ������ͽ�B

2.1.2 JSON��ʽ����

2.1.3 CSV��ʽ����

2.2 �W�ץ�������x���A

2.2.1 ���x�������̽�B

2.2.2 HTTP����ԭ��

2.2.3 �W퓻��A

2.2.4ʹ��urllib��

2.2.5ʹ��requests��Ո��Wվ

2.2.6���t���_ʽ��ȡ����

2.2.7������ʹ��

2.2.8ʹ��Cookie���

2.3�������ʹ��

2.3.1ʹ��Beautiful Soup�����W�

2.3.2ʹ��XPath��̎��HTML

2.4�����惦

2.4.1�惦��JSON��ʽ

2.4.2�惦��CSV��ʽ

2.4.3�惦��MySQL��������

2.5 ���}

��3�� �����ɼ��M�A

3.1 Ajax������ȡ

3.1.1 ʲô��Ajax

3.1.2 ��ʲôҪ�W��Ajax��ȡ

3.1.3 �����M��Ajax��������ȡ

3.2 ʹ��Seleniumץȡ�ӑB��Ⱦ���

3.2.1 Selenium�Ļ�����B�c���b����

3.2.2 Selenium�ĺ���ʹ��

3.2.3 Selenium�đ��Ì���

3.2.4 Selenium�ĸ߼�����

3.3 ���x��ܽ�B

3.3.1 ���x��ܽ�B

3.3.2 ���x��ܙC��

3.4 Scrapy���x���

3.4.1 Scrapy����c���b

3.4.2 Scrapy�Ļ���ʹ��

3.4.3 ����Scrapy�Ŀ

3.4.4 ����Spider

3.4.5 ����Item Pipeline

3.4.6 �O��Settingsģ�K

3.5 ���}

��4�� ������ϴ

4.1 ������ϴ����

4.2 ȱʧ����̎��

4.2.1 ����ȱʧ��ԭ��

4.2.2 ȱʧֵ����Ҫ̎������

4.3 ����ֵ���؏�ֵ̎��

4.3.1 �h���؏�ֵ

4.3.2 �z�y����ֵ

4.3.3 �^�V����ֵ

4.4 �����D�Q

4.4.1 ��������D�Q

4.4.2 �ú�����ӳ���M�Д����D�Q

4.4.3 �������S����

4.4.4 �B�m�����xɢ��

4.4.5 ��׃��̎��e�͔���

4.4.6 �����˜ʻ�

4.5 ���}

��5�� ����Ҏ���c�ֽM�ۺ�

5.1 ����Ҏ��

5.1.1 ����“���c�ϲ�

5.1.2 �֌�����

5.1.3 ��������

5.2 �����ֽM

5.2.1 �����ֽM����

5.2.2 �\��GroupBy�C�ƷֽM

5.3 �����ۺ�

5.3.1 groupby���A�õľۺϷ���

5.3.2 aggregate()�����ctransform()����

5.3.3 ʹ��apply()����

5.4 ���}

��6�� �����Ӱ���а񔵓��ɼ��c�A̎��

6.1 �����Ӱ�񔵓��ɼ�Ŀ��

6.2 ����W퓽Y������

6.2.1 ���^���w������

6.2.2 ΢�^���w��Ϣ��ȡ

6.3 �������x

6.3.1 �ʂ�URL

6.3.2 Ո��푑�

6.3.3 ��ȡ����

6.3.4 ���攵��

6.4 �����A̎��

6.5 ������ҕ��

6.6 ���}

��7�� ʹ��Scrapy����cSelenium�����ɼ��c��ҕ��

7.1 �ɼ�Ŀ�˺͜ʂ乤��

7.2 �󔵓��W퓽Y������

7.3 ʹ��Scrapy�cSelenium��ȡ��Ϣ

7.3.1 ����item.py�cspider.py

7.3.2 ����middlewares.py

7.3.3 ����pipelines.py

7.3.4 �O��settings.py

7.3.5 �\�нY��

7.4 ij��̔����A̎���c��ҕ��

7.4.1 �����A̎��

7.4.2 ������ҕ��

7.5 ���}

��8�� ���a�����A̎��

8.1 �о�������Ŀ�˷���

8.2 ���������c̽��

8.3 �����A̎��

8.3.1 ����Ҏ�s

8.3.2 ����ȱʧֵ̎��

8.3.3 ��������ֵ̎��

8.3.4 �����D�Q

8.3.5 ���攵��

8.4 ���}