- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
请帮助我使我的脚本成为多线程的。我已阅读 threads::shared
的文档模块,但它对理解如何做没有帮助
use threads;
use threads::shared;
use LWP::UserAgent;
use HTTP::Cookies;
my $NUM_WORKERS = 2;
sub worker {
my ($i) = @_;
my ($web, $ck) = browser();
($username, $password) = split ':', $acc;
my $url = 'http://www.site.ru/?tkn'. int(rand(10000));
my $response = $web->post($url, Content =>
[//////]);
while(1)
{
my $url = 'http://www.site.ru/dk?st.page='.$i.'&st.name=%D0%B0';
my $response = $web->get($url);
@list = ($response->content =~ /card_wrp"><div class="photoWrapper"><div><a href="\/(.*?)\?/g);
@popl = ($response->content =~/<\/div><div class="info">(.*?)<\/div>/g);
for ($j = 0; $j <= scalar @list - 1; $j++)
{
$popl[$j] =~ s/ //g;
open F, ">>gr.txt";
print F $list[$j].':'.$popl[$j]. "\n";
close F;
}
print "[+] Page $i \n";
}
}
my $i :shared = 1;
my $last = 79265;
my @workers;
for (1..$NUM_WORKERS) {
push @workers, async {
while (1) {
my $i;
{
lock $I;
return if $i == $last;
$i = ++$I;
}
worker($i);
}
};
}
$_->join() for @workers;
sub browser
{
my $web = new LWP::UserAgent;
my $ck = new HTTP::Cookies;
$web->cookie_jar($ck);
$web->agent('Opera/9.80 (Windows 7; U; en) Presto/2.9.168 Version/11.50');
$web->requests_redirectable(0);
$web->timeout(5);
return $web, $ck;
}
sub loadf {
open (F, "<".$_[0]) or erroropen($_[0]);
chomp(my @data = <F>);
close F;
return @data;
}
我不明白我需要分享什么变量。非常感谢所有帮助我的成员
最佳答案
如果你没有线程,工作循环看起来像
for my $i (1..79265) {
worker($i);
}
问题在于该变量不可共享,而 for
维护了一个无法共享的内部状态,因此我们需要将其重写为没有这些问题的东西。
选项 1:
my @a = 1..79265;
while (@a) {
worker(shift(@a));
}
选项 2:
my $i = 0;
while (++$i <= 79265) {
worker($i);
}
并行化任一版本所需的只是确保 @a
/$i
在您检查它和使用它之间不会发生变化。这是通过添加锁来完成的。
选项 1:
my @a :shared = 1..79265;
while (1) {
my $i;
{ lock @a; return if !@a; $i = shift(@a); }
worker($i);
}
选项 2:
my $I :shared = 1;
while (1) {
my $i;
{ lock $I; $i = $I; return if ++$I > 79265; }
worker($i);
}
选项 1 是后面的 Thread::Queue 解决方案的基础(尽管它可以按原样使用)。选项 2 在下方按原样使用。
我通常使用 Thread::Queue或 Thread::Queue::Any :
use threads;
use Thread::Queue qw( );
my $NUM_WORKERS = 5;
sub worker {
my ($i) = @_;
... put your download code here ...
}
my $q = Thread::Queue->new();
my @workers;
for (1..$NUM_WORKERS) {
push @workers, async {
while (defined(my $i = $q->dequeue())) {
worker($i);
}
};
}
$q->enqueue($_) for 1..79265;
$q->enqueue(undef) for @workers;
$_->join() for @workers;
但是我们可以很容易地做到这一点:
use threads;
use threads::shared;
my $NUM_WORKERS = 5;
sub worker {
my ($i) = @_;
... put your download code here ...
}
my $I :shared = 1;
my $last = 79265;
my @workers;
for (1..$NUM_WORKERS) {
push @workers, async {
while (1) {
my $i;
{
lock $I;
$i = $I;
return if ++$I > $last;
}
worker($i);
}
};
}
$_->join() for @workers;
关于Perl 中的多线程,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12342458/
如果我的 Perl 程序使用 Perl 模块,它将如何确定在哪里可以找到包含模块代码的文件? 例如,如果程序包含: use MyModule1; # Example 1 us
我在一个文件中有一些不同格式的数字:8.3、0.001、9e-18。我正在寻找一种简单的方法来读取它们并存储它们而不会损失任何精度。这在 AWK 中很容易,但在 Perl 中是如何完成的呢?我只愿意使
我在一个文件中有一些不同格式的数字:8.3、0.001、9e-18。我正在寻找一种简单的方法来读取它们并存储它们而不会损失任何精度。这在 AWK 中很容易,但在 Perl 中是如何完成的呢?我只愿意使
我正在自学 Perl,并且在我的 Windows 8 64 位系统上安装了 Strawberry。 Strawberry 命令行似乎工作正常,我在 C 驱动器上的 Strawberry 文件夹中创建了
我在 Perl 模块 IO::Socket::SSL 中发现了一个错误,我可能会修复它,但是,我担心测试修复。我从 Debian 下载了源码包(因为我打算为它制作一个 Debian 包或补丁)并查看了
我有一个 perl 文件,它使用了两个 perl 模块 A.pm 和 B.pm。 但是在 B.pm 中我需要调用 A.pm 的子程序。即使我在 A.pm 中使用并尝试使用它,我仍然遇到未定义的错误。
有没有办法在 Perl 运行时加载整个模块?我原以为我用 autouse 找到了一个很好的解决方案,但以下代码无法编译: package tryAutouse2; use autouse 'tryAu
过去,我编写过许多 perl 模块,以及不止一些独立的 perl 程序,但我之前从未发布过多文件 perl 程序。 我有一个几乎处于 beta 阶段的 perl 程序,它将被开源发布。它需要一些数据文
我有 1 个 perl 脚本,我们在其中编写了几个子例程。例子: # Try_1.pl main(); sub main{ --- --- check(); } check { -- --} 现在,
似乎 CPAN 上的一些(很多?)模块部分是使用 XS 在 C 中实现的,如果需要,可以回退到纯 perl 实现。虽然这很聪明,但它显然会损害性能,我想知道它是否会发生,以便我可以解决问题。 有没有一
我对 perl 很陌生。我希望我可以从 perl 安装一些软件包,我这样做是这样的: perl -MCPAN -e 'install VM::EC2' 我猜它由于依赖而失败,它显示: Result:
给定一个 Perl 包 Foo.pm,例如 package Foo; use strict; sub bar { # some code here } sub baz { # more
我有一个用 Perl 编写的测试生成器。它生成连接到模拟器的测试。这些测试本身是用 Perl 编写的,并通过其 API 连接到模拟器。我希望生成的代码是人类可读的,这意味着我希望它能够正确缩进和格式化
我正在学习 Perl,非常新的用户。我可以知道这些 Perl 代码之间有什么区别吗? #!/usr/bin/perl & #!/usr/bin/perl -w 最佳答案 那不是 perl 代码,它是
我不认为这是一个重复的问题。这专门针对 Perl 模块附带的脚本。 通常,在安装多个 Perl 版本时,您可以将 perl 可执行文件标记为版本号 (perl5.32),这样它们就可以在 /whate
我有一个在文件中使用 Blowfish 加密的程序和第二个 perl 程序,它提示输入用于将其解密为字符串的密码,我希望不必将解密的源代码写入硬盘驱动器,尽管将它放在内存中并不是真正的问题,因为运行程
有没有人为 Perl 中的惰性求值列表找到了一个好的解决方案?我尝试了很多方法来改变类似的东西 for my $item ( map { ... } @list ) { } 进入懒惰的评估——例如,通
我安装了多个版本的 Perl。 我已经指定了要使用的版本。但是为了验证,我想从 .pl 脚本本身输出 Perl 的版本。 这可能吗? 在 Perl 脚本中解析“perl --version”的输出似乎
人们还经常问“我怎样才能编译 Perl?”而他们真正想要的是创建一个可以在机器上运行的可执行文件,即使他们没有安装 Perl。 我知道有几种解决方案: perl2exe靛蓝之星 它是商业的。我从未尝试
关闭。这个问题是opinion-based .它目前不接受答案。 想改进这个问题?更新问题,以便 editing this post 可以用事实和引用来回答它. 8年前关闭。 Improve this
我是一名优秀的程序员,十分优秀!