跳转到内容

如何在 Octoparse 中使用 GProxy 代理

TL;DR

在 Octoparse 中配置 GProxy 代理以进行可视化网页抓取。包含 Octoparse 图形界面中的代理设置步骤、轮换选项与最佳实践。

语言: No-Code

准备事项

  • [
  • "
  • O
  • c
  • t
  • o
  • p
  • a
  • r
  • s
  • e
  • "
  • ,
  • "
  • G
  • P
  • r
  • o
  • x
  • y
  • "
  • ,
  • "
  • U
  • R
  • L
  • "
  • ]

分步设置

1

[

2

{

3

"

4

T

5

I

6

T

7

L

8

E

9

"

10

:

11

12

"

13

14

15

16

O

17

C

18

T

19

O

20

P

21

A

22

R

23

S

24

E

25

26

27

28

"

29

,

30

31

"

32

D

33

E

34

S

35

C

36

R

37

I

38

P

39

T

40

I

41

O

42

N

43

"

44

:

45

46

"

47

48

49

50

51

52

53

"

54

,

55

56

"

57

C

58

O

59

D

60

E

61

"

62

:

63

64

"

65

O

66

C

67

T

68

O

69

P

70

A

71

R

72

S

73

E

74

75

76

77

S

78

E

79

T

80

T

81

I

82

N

83

G

84

S

85

86

87

88

P

89

R

90

O

91

X

92

Y

93

94

S

95

E

96

T

97

T

98

I

99

N

100

G

101

S

102

"

103

}

104

,

105

106

{

107

"

108

T

109

I

110

T

111

L

112

E

113

"

114

:

115

116

"

117

118

119

G

120

P

121

R

122

O

123

X

124

Y

125

126

127

128

129

130

131

132

133

134

"

135

,

136

137

"

138

D

139

E

140

S

141

C

142

R

143

I

144

P

145

T

146

I

147

O

148

N

149

"

150

:

151

152

"

153

154

155

156

G

157

P

158

R

159

O

160

X

161

Y

162

163

164

165

166

167

"

168

,

169

170

"

171

C

172

O

173

D

174

E

175

"

176

:

177

178

"

179

P

180

R

181

O

182

X

183

Y

184

185

T

186

Y

187

P

188

E

189

:

190

191

H

192

T

193

T

194

P

195

\

196

N

197

A

198

D

199

D

200

R

201

E

202

S

203

S

204

:

205

206

P

207

R

208

O

209

X

210

Y

211

.

212

G

213

P

214

R

215

O

216

X

217

Y

218

.

219

N

220

E

221

T

222

\

223

N

224

P

225

O

226

R

227

T

228

:

229

230

1

231

0

232

0

233

0

234

\

235

N

236

U

237

S

238

E

239

R

240

N

241

A

242

M

243

E

244

:

245

246

Y

247

O

248

U

249

R

250

_

251

U

252

S

253

E

254

R

255

\

256

N

257

P

258

A

259

S

260

S

261

W

262

O

263

R

264

D

265

:

266

267

Y

268

O

269

U

270

R

271

_

272

P

273

A

274

S

275

S

276

"

277

}

278

,

279

280

{

281

"

282

T

283

I

284

T

285

L

286

E

287

"

288

:

289

290

"

291

292

293

294

295

"

296

,

297

298

"

299

D

300

E

301

S

302

C

303

R

304

I

305

P

306

T

307

I

308

O

309

N

310

"

311

:

312

313

"

314

315

316

317

318

319

320

321

322

"

323

,

324

325

"

326

C

327

O

328

D

329

E

330

"

331

:

332

333

"

334

R

335

O

336

T

337

A

338

T

339

I

340

O

341

N

342

343

M

344

O

345

D

346

E

347

:

348

349

P

350

E

351

R

352

353

R

354

E

355

Q

356

U

357

E

358

S

359

T

360

361

(

362

O

363

R

364

365

E

366

V

367

E

368

R

369

Y

370

371

N

372

373

R

374

E

375

Q

376

U

377

E

378

S

379

T

380

S

381

)

382

\

383

N

384

T

385

I

386

M

387

E

388

O

389

U

390

T

391

:

392

393

3

394

0

395

396

S

397

E

398

C

399

O

400

N

401

D

402

S

403

\

404

N

405

R

406

E

407

T

408

R

409

Y

410

411

O

412

N

413

414

F

415

A

416

I

417

L

418

U

419

R

420

E

421

:

422

423

E

424

N

425

A

426

B

427

L

428

E

429

D

430

"

431

}

432

,

433

434

{

435

"

436

T

437

I

438

T

439

L

440

E

441

"

442

:

443

444

"

445

446

447

448

449

450

451

452

453

"

454

,

455

456

"

457

D

458

E

459

S

460

C

461

R

462

I

463

P

464

T

465

I

466

O

467

N

468

"

469

:

470

471

"

472

473

474

475

476

477

478

479

480

481

482

483

484

485

486

487

488

489

490

"

491

,

492

493

"

494

C

495

O

496

D

497

E

498

"

499

:

500

501

"

502

P

503

R

504

O

505

X

506

Y

507

508

1

509

:

510

511

U

512

S

513

E

514

R

515

-

516

C

517

O

518

U

519

N

520

T

521

R

522

Y

523

-

524

U

525

S

526

:

527

P

528

A

529

S

530

S

531

@

532

P

533

R

534

O

535

X

536

Y

537

.

538

G

539

P

540

R

541

O

542

X

543

Y

544

.

545

N

546

E

547

T

548

:

549

1

550

0

551

0

552

0

553

\

554

N

555

P

556

R

557

O

558

X

559

Y

560

561

2

562

:

563

564

U

565

S

566

E

567

R

568

-

569

C

570

O

571

U

572

N

573

T

574

R

575

Y

576

-

577

D

578

E

579

:

580

P

581

A

582

S

583

S

584

@

585

P

586

R

587

O

588

X

589

Y

590

.

591

G

592

P

593

R

594

O

595

X

596

Y

597

.

598

N

599

E

600

T

601

:

602

1

603

0

604

0

605

0

606

\

607

N

608

P

609

R

610

O

611

X

612

Y

613

614

3

615

:

616

617

U

618

S

619

E

620

R

621

-

622

C

623

O

624

U

625

N

626

T

627

R

628

Y

629

-

630

G

631

B

632

:

633

P

634

A

635

S

636

S

637

@

638

P

639

R

640

O

641

X

642

Y

643

.

644

G

645

P

646

R

647

O

648

X

649

Y

650

.

651

N

652

E

653

T

654

:

655

1

656

0

657

0

658

0

659

"

660

}

661

,

662

663

{

664

"

665

T

666

I

667

T

668

L

669

E

670

"

671

:

672

673

"

674

675

676

677

678

679

680

"

681

,

682

683

"

684

D

685

E

686

S

687

C

688

R

689

I

690

P

691

T

692

I

693

O

694

N

695

"

696

:

697

698

"

699

700

701

702

703

704

705

706

707

708

709

710

711

712

713

714

"

715

,

716

717

"

718

C

719

O

720

D

721

E

722

"

723

:

724

725

"

726

N

727

E

728

W

729

730

T

731

A

732

S

733

K

734

735

736

737

E

738

N

739

T

740

E

741

R

742

743

U

744

R

745

L

746

747

748

749

S

750

E

751

L

752

E

753

C

754

T

755

756

D

757

A

758

T

759

A

760

761

F

762

I

763

E

764

L

765

D

766

S

767

768

769

770

E

771

N

772

A

773

B

774

L

775

E

776

777

P

778

R

779

O

780

X

781

Y

782

783

784

785

R

786

U

787

N

788

"

789

}

790

,

791

792

{

793

"

794

T

795

I

796

T

797

L

798

E

799

"

800

:

801

802

"

803

804

805

806

807

808

"

809

,

810

811

"

812

D

813

E

814

S

815

C

816

R

817

I

818

P

819

T

820

I

821

O

822

N

823

"

824

:

825

826

"

827

828

829

830

831

832

833

834

835

836

837

838

839

840

841

842

"

843

,

844

845

"

846

C

847

O

848

D

849

E

850

"

851

:

852

853

"

854

R

855

U

856

N

857

858

T

859

A

860

S

861

K

862

863

I

864

N

865

866

L

867

O

868

C

869

A

870

L

871

872

M

873

O

874

D

875

E

876

877

878

879

C

880

H

881

E

882

C

883

K

884

885

E

886

X

887

T

888

R

889

A

890

C

891

T

892

I

893

O

894

N

895

896

R

897

E

898

S

899

U

900

L

901

T

902

S

903

904

905

906

V

907

E

908

R

909

I

910

F

911

Y

912

913

N

914

O

915

916

B

917

L

918

O

919

C

920

K

921

S

922

"

923

}

924

]

代码示例

为什么在 Octoparse 中使用 GProxy?

Octoparse 是一款流行的无代码网页抓取工具,采用可视化的点选式界面。虽然 Octoparse 自带 IP 轮换功能,但将 GProxy 作为外部代理使用,可获得覆盖 150+ 国家的 10M+ 住宅 IP——IP 多样性远超 Octoparse 的默认 IP 池,能显著减少难抓目标上的封禁和 CAPTCHA。

在 Octoparse 中添加 GProxy 代理

Octoparse 支持通过 Settings 面板配置自定义代理。您可以把 GProxy 的代理端点连同认证凭据一起添加为自定义代理。配置完成后,Octoparse 会将全部抓取请求经由 GProxy 网络转发。

代理轮换设置

设置 Octoparse 轮换 GProxy IP 的频率。使用 GProxy 的 backconnect 代理时,每条新连接都会自动获得新的 IP。请将 Octoparse 的轮换间隔与您的抓取节奏匹配——对敏感站点通常为每 1-5 个请求轮换一次。

地理定向抓取

抓取特定地区数据时,请使用 GProxy 的 geo-targeting 功能。在 Octoparse 中添加按国家区分的代理条目,将请求经由特定地区的 IP 转发。抓取本地化电商价格、搜索结果或区域受限内容时,这一点必不可少。

云端执行与本地执行

Octoparse 可在本地或云端运行任务。本地执行时,请在桌面应用中配置代理;云端执行时,请在上传任务前把代理设置加入任务配置。GProxy 两种模式均支持。

应对反爬虫防护

将 GProxy 的住宅代理与 Octoparse 内置的浏览器模拟结合使用,可获得最高成功率。住宅 IP 比数据中心 IP 难检测得多,而 Octoparse 的可视化浏览器渲染可处理简单 HTTP 抓取无法应对的重度 JavaScript 站点。

应用场景

[

{

"

T

I

T

L

E

"

:

"

"

,

"

D

E

S

C

R

I

P

T

I

O

N

"

:

"

使

"

}

,

{

"

T

I

T

L

E

"

:

"

"

,

"

D

E

S

C

R

I

P

T

I

O

N

"

:

"

使

"

}

,

{

"

T

I

T

L

E

"

:

"

"

,

"

D

E

S

C

R

I

P

T

I

O

N

"

:

"

使

I

P

"

}

,

{

"

T

I

T

L

E

"

:

"

"

,

"

D

E

S

C

R

I

P

T

I

O

N

"

:

"

"

}

]

进阶技巧
使用 GProxy 的单个 backconnect 端点,而不是添加多个代理条目——它会自动轮换。代理连接下建议把 Octoparse 的页面加载超时设为 30s。面对新目标先用住宅代理,如果没有封禁问题再切换到数据中心代理。导出并保存您的代理配置,以便在其他任务中复用。

FAQ

+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+
+

准备开始了吗?

几分钟即可开始使用 GProxy——住宅代理 $0.85/GB 起,IPv6 $0.03/个起,按用量付费。

其他集成

support_agent
GProxy Support
Usually replies within minutes
Hi there!
Send us a message and we'll reply as soon as possible.