Add SIGQUIT handler, fix setting of default value of loglevel

.gitignore

@@ -5,5 +5,7 @@ _Deparsed_XSubs.pm
 *.pid
 *.log
 data/cache/**
+data/brains/**
+data/lat/**
 data/config.json
 vendor_perl/**

.perlcriticrc

@@ -1,6 +1,19 @@
 #!/usr/bin/env perlcritic
-severity    = 5
+
-verbose     = 8
+# Задействованные модули критика:
+#
+# Perl::Critic::More
+# Perl::Critic::Pulp
+# Perl::Critic::TooMuchCode
+# Perl::Critic::Lax
+# Perl::Critic::CognitiveComplexity
+# Perl::Critic::Policy::CompileTime
+# Perl::Critic::Policy::ProhibitImplicitImport
+# Perl::Critic::Policy::Dynamic::NoIndirect
+# Perl::Critic::StricterSubs
+# Perl::Critic::Policy::ProhibitImplicitImport
+# Perl::Critic::Policy::CodeLayout::RequireUseUTF8
+
 
 # minorify some of warnings that are not really critical
 [-InputOutput::RequireCheckedClose]
@@ -116,3 +129,5 @@ lib_sections    = NAME | VERSION | DESCRIPTION | AUTHOR | LICENSE AND COPYRIGHT
 max_length = 256
 
 [-Miscellanea::ProhibitUnrestrictedNoCritic]
+
+[-RegularExpressions::ProhibitFixedStringMatches]

README

@@ -6,18 +6,18 @@ aleesa-craniac
 
 Механика работы
 -----------------------------------------------------------------------------------------------------------------------
-Бредогенератор подписан на redis-канал craniac. В этот канал пишет другой демоночек - aleesa-misc. Причём, особенность
+Бредогенератор подписан на redis-канал craniac. В этот канал пишет другой демоночек - aleesa-misc-go. Причём,
-такова, что если aleesa-misc не распознала фразу, как команду для другого модуля, то по-умолчанию такая фраза
+особенность такова, что если aleesa-misc не распознала фразу, как команду для другого модуля, то по-умолчанию такая
-оправляется в канал craniac, то есть сюда, в "мозги".
+фраза оправляется в канал craniac, то есть сюда, в "мозги".
 
 У бредогенератора есть 2 типа входящих сообщений - ключевые фразы, на которые у него есть готовые (статические) ответы
 и остальные, для которых ему надо решить нужен ли ответ и по-необходимости сгенерировать его, используя данные в цепях
 Маркова.
 
 Ответ направляется в redis-канал, указанный в поле plugin входящего сообщения, если не предполагается некоей особой
-логики, связанной с easter egg поведением.
+логики, связанной, наприме, с easter egg поведением.
 
-Формат протокола - см. README от aleesa-misc.
+Формат протокола - см. README от aleesa-misc-go.
 
 
 Как это запустить?

bin/aleesa-craniac

@@ -47,7 +47,10 @@ my $runAsUid = $UID;
 
 my $piddir = '/var/run/' . basename (abs_path ($PROGRAM_NAME));
 my $C = LoadConf ();
-my $loglevel = $C->{'loglevel'} // 'notice';
+
+my $loglevel = 'notice';
+$loglevel = $C->{'loglevel'} if defined $C->{'loglevel'};
+
 my $logfile;
 
 if (defined $C->{'log'}) {
@@ -136,6 +139,7 @@ close $MYPID;                                        ## no critic (InputOutput::
 # подстраховка на случай ядерной войны.
 local $SIG{INT}  = \&__signal_handler;
 local $SIG{TERM} = \&__signal_handler;
+local $SIG{QUIT} = \&__signal_handler;
 
 # Поставим правильное имя процесса в proctitle
 $PROGRAM_NAME = abs_path $PROGRAM_NAME;              ## no critic (Variables::RequireLocalizedPunctuationVars)

cpanfile

@@ -1,11 +1,12 @@
 ## no critic
 requires 'Carp',                 '==1.50';
+requires 'Clone',                '==0.45';
 requires 'Cwd',                  '==3.75';
 requires 'Cwd::utf8',            '==0.011';
 requires 'Data::Dumper',         '==2.183';
 requires 'Digest::SHA',          '==6.02';
-requires 'Encode',               '==3.16';
+# Part of perl
-requires 'English',              '==1.11';
+requires 'English',              '0';
 requires 'File::Basename',       '==2.85';
 requires 'File::Path',           '==2.18';
 requires 'File::Spec',           '==3.75';
@@ -16,15 +17,13 @@ requires 'Log::Any',             '==1.710';
 requires 'Log::Any::Adapter',    '==1.710';
 requires 'Log::Any::For::Std',   '==0.05';
 requires 'Math::Random::Secure', '==0.080001';
-requires 'Mojolicious',          '==9.22';
+requires 'Mojolicious',          '==9.26';
 # Part of Mojolicious
 requires 'Mojo::IOLoop',         '0';
 requires 'Mojo::IOLoop::Signal', '==0.003';
-requires 'Mojo::Redis',          '==3.27';
+requires 'Mojo::Redis',          '==3.29';
 # Part of perl
 requires 'POSIX',                '0';
-# Buggy, latest version works, as pub-sub, but fails tests
-requires 'Protocol::Redis::XS',  '0';
 requires 'Text::Fuzzy',          '==0.29';
 # Part of perl
 requires 'utf8',                 '0';

data/config_sample.json

@@ -25,6 +25,9 @@
     # maximal amount of message forwardings, to avoid endless loops
     "forwards_max" : 5,
 
+    # Command prefix aka command sign
+    "csign" : "!",
+
 "lat" : {
         "brain" : "data/lat/brain.sqlite",
         "src" : "data/lat.txt"

lib/Craniac.pm

@@ -17,16 +17,14 @@ use open qw (:std :utf8);
 use English qw ( -no_match_vars );
 
 # Модули для работы приложения
+use Clone qw (clone);
 use Data::Dumper qw (Dumper);
-use Digest::SHA qw (sha1_base64);
+use Digest::SHA qw (sha256_hex);
-use Encode qw (encode_utf8);
 use File::Spec ();
 use Hailo ();
 use Log::Any qw ($log);
 use Mojo::IOLoop ();
 use Mojo::IOLoop::Signal ();
-# Чтобы "уж точно" использовать hiredis-биндинги, загрузим этот модуль перед Mojo::Redis
-use Protocol::Redis::XS ();
 use Mojo::Redis ();
 use Math::Random::Secure qw (irand);
 use Text::Fuzzy qw (distance_edits);
@@ -39,13 +37,16 @@ use Exporter qw (import);
 our @EXPORT_OK = qw (RunCraniac);
 
 sub RandomCommonPhrase ();
-sub utf2sha1 ($);
 sub fmatch (@);
 sub brains (@);
 sub RunCraniac ();
 
 my $c = LoadConf ();
-my $fwd_cnt = $c->{'forward_max'} // 5;
+my $fwd_cnt = 5;
+
+if (defined $c->{'forward_max'}) {
+	$fwd_cnt = $c->{'forward_max'};
+}
 
 my $hailo;
 
@@ -68,17 +69,6 @@ sub RandomCommonPhrase () {
 	return $myphrase[irand ($#myphrase + 1)];
 }
 
-sub utf2sha1 ($) {
-	my $string = shift;
-
-	if ($string eq '') {
-		return sha1_base64 '';
-	}
-
-	my $bytes = encode_utf8 $string;
-	return sha1_base64 $bytes;
-}
-
 sub fmatch (@) {
 	my $srcphrase = shift;
 	my $answer = shift;
@@ -96,30 +86,27 @@ sub fmatch (@) {
 
 # Ленивая инициализация мозга. Создаём/открываем мозг только если нам надо "подумать" а не на каждую входящую фразу.
 sub brains (@) {
-	my $chatid = shift;
+	my $plugin = shift;
-	my $telegram = shift // 0;
+	my $cid = shift;
 
-	unless (defined $hailo->{$chatid}) {
+	unless (defined $hailo->{$cid}) {
-		my $cid = $chatid;
 		my $brainname;
 
 		# Костыль, чтобы не портировать данные из телеграммных мозгов и не заниматься переименованием
-		unless ($telegram) {
+		if ($plugin eq 'telegram') {
-			$cid = utf2sha1 ($chatid);
-			$cid =~ s/\//-/xmsg;
-			$brainname = sprintf '%s/%s.sqlite', $c->{braindir}, $cid;
-		} else {
 			$brainname = sprintf '%s/%s.brain.sqlite', $c->{braindir}, $cid;
+		} else {
+			$brainname = sprintf '%s/%s.sqlite', $c->{braindir}, $cid;
 		}
 
-		$hailo->{$chatid} = eval {
+		$hailo->{$cid} = eval {
 			Hailo->new (
 				brain => $brainname,
 				order => 3,
 			);
 		};
 
-		if (defined $hailo->{$chatid}) {
+		if (defined $hailo->{$cid}) {
 			$log->info (sprintf '[INFO] Lazy init brain: %s', $brainname);
 		} else {
 			$log->error ("[ERROR] $EVAL_ERROR");
@@ -134,82 +121,115 @@ sub brains (@) {
 my $parse_message = sub {
 	my $self = shift;
 	my $m    = shift;
+
+	my $answer = clone ($m);
+	$answer->{from} = 'craniac';
+
 	my $send_to = $m->{plugin};
 	my $chatid  = $m->{chatid};
 	my $userid  = $m->{userid};
 	my $phrase  = $m->{message};
 	my $reply;
 
-	# Если $m->{misc}->{answer} не существует, то проставим его как 1, предполагаем, что по-умолчанию ответ от нас
+	if (defined $answer->{misc}) {
-	# всё-таки ожидают. Если что - уточним ниже.
+		unless (defined $answer->{misc}->{answer}) {
-	if (defined $m->{misc}) {
+			$answer->{misc}->{answer} = 1;
-		unless (defined $m->{misc}->{fwd_cnt}) {
+		}
-			$m->{misc}->{fwd_cnt} = 1;
+
+		unless (defined $answer->{misc}->{bot_nick}) {
+			$answer->{misc}->{bot_nick} = '';
+		}
+
+		unless (defined $answer->{misc}->{csign}) {
+			$answer->{misc}->{csign} = $c->{csign};
+		}
+
+		unless (defined $answer->{misc}->{fwd_cnt}) {
+			$answer->{misc}->{fwd_cnt} = 1;
 		} else {
-			if ($m->{misc}->{fwd_cnt} > $fwd_cnt) {
+			if ($answer->{misc}->{fwd_cnt} > $fwd_cnt) {
 				$log->error ('[ERROR] Forward loop detected, discarding message.');
 				$log->debug (Dumper $m);
 				return;
 			} else {
-				$m->{misc}->{fwd_cnt}++;
+				$answer->{misc}->{fwd_cnt}++;
 			}
 		}
 
-		unless (defined $m->{misc}->{answer}) {
+		unless (defined $answer->{misc}->{good_morning}) {
-			$m->{misc}->{answer} = 1;
+			$answer->{misc}->{good_morning} = 0;
 		}
 
-		unless (defined $m->{misc}->{csign}) {
+		unless (defined $answer->{misc}->{msg_format}) {
-			$m->{misc}->{csign} = '!';
+			$answer->{misc}->{msg_format} = 0;
 		}
 
-		# TODO: не проставлять дефолтный ник!
+		unless (defined $answer->{misc}->{username}) {
-		unless (defined $m->{misc}->{bot_nick}) {
+			$answer->{misc}->{username} = 'user';
-			$m->{misc}->{bot_nick} = 'aleesa';
 		}
 	} else {
-		$m->{misc}->{answer} = 1;
+		$answer->{misc}->{answer} = 1;
-		$m->{misc}->{csign} = '!';
+		$answer->{misc}->{bot_nick} = '';
-		$m->{misc}->{bot_nick} = 'aleesa';
+		$answer->{misc}->{csign} = $c->{csign};
+		$answer->{misc}->{fwd_cnt} = 1;
+		$answer->{misc}->{good_morning} = 0;
+		$answer->{misc}->{msg_format} = 0;
+		$answer->{misc}->{username} = 'user';
 	}
 
-	if (defined $m->{misc}->{bot_nick}) {
+	my $csign = $answer->{misc}->{csign};
+	$answer->{message} = '';
+
+	my $is_command = 0;
+	my $cmd = $m->{message};
+
+	if ($m->{message} =~ /^\Q$csign/u) {
+		$cmd = substr $m->{message}, length ($csign);
+		$is_command = 1;
+	}
+
+	if ($m->{misc}->{bot_nick} ne '') {
 		# Если нам сообщили ник бота, попробуем вымарать его из оригинального текста сообщения, в большинстве случаев он
-		# нам не интересн.
+		# нам не интересен.
 		$phrase =~ s/\s*\,?\s*($m->{misc}->{bot_nick})\s*\,?\s*/ /gui;
 
+		# TODO: проработать реакцию на "пьяный бред".
+
 		# В ключевых фразах можно обратиться с некоторыми командами к боту по нику, не используя символ команды
-		if ($m->{message} =~ /^\s*\Q;m->{misc}->{bot_nick}\E\s*;/ui) {
+		if ($m->{message} =~ /^\s*\Q$m->{misc}->{bot_nick}\E\s*$/ui) {
 			$reply = 'Чего?';
-		} elsif ($m->{message} =~ /^(\Q$m->{misc}->{csign}\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)ping\.?\s*$/i) {
+		} elsif ($m->{message} =~ /^(\Q$csign\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)ping\.?\s*$/i) {
 			$reply = 'Pong.';
-		} elsif ($m->{message} =~ /^(\Q$m->{misc}->{csign}\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)pong\.?\s*$/i) {
+		} elsif ($m->{message} =~ /^(\Q$csign\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)pong\.?\s*$/i) {
 			$reply = 'Wat?';
-		} elsif ($m->{message} =~ /^(\Q$m->{misc}->{csign}\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)пин(г|х)\.?\s*$/ui) {
+		} elsif ($m->{message} =~ /^(\Q$csign\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)пин(г|х)\.?\s*$/ui) {
 			$reply = 'Понг.';
-		} elsif ($m->{message} =~ /^(\Q$m->{misc}->{csign}\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)пон(г|х)\.?\s*$/ui) {
+		} elsif ($m->{message} =~ /^(\Q$csign\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)пон(г|х)\.?\s*$/ui) {
 			$reply = 'Шта?';
-		} elsif ($m->{message} =~ /^(\Q$m->{misc}->{csign}\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)(хэлп|halp)\s*$/ui) {
+		} elsif ($m->{message} =~ /^(\Q$csign\E|\Q$m->{misc}->{bot_nick}\E\s*\,?\s+)(хэлп|halp)\s*$/ui) {
 			$reply = 'HALP!!!11';
 		}
 	} else {
 		# Если нам не сообщили ник бота, то ищем команды, используя символ команды
-		if ($m->{message} =~ /^\Q$m->{misc}->{csign}\Eping\.?\s*$/ui) {
+		if ($is_command) {
+			if ($cmd =~ /^ping\.?\s*$/ui) {
 				$reply = 'Pong.';
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\Epong\.?\s*$/i) {
+			} elsif ($cmd =~ /^pong\.?\s*$/i) {
 				$reply = 'Wat?';
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\Eпин(г|х)\.?\s*$/ui) {
+			} elsif ($cmd=~ /^пин(г|х)\.?\s*$/ui) {
 				$reply = 'Понг.';
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\Eпон(г|х)\.?\s*$/ui) {
+			} elsif ($cmd =~ /^пон(г|х)\.?\s*$/ui) {
 				$reply = 'Шта?';
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(хэлп|halp)\s*$/ui) {
+			} elsif ($cmd=~ /^(хэлп|halp)\s*$/ui) {
 				$reply = 'HALP!!!11';
 			}
 		}
+	}
 
 	# Поищем в тексте входящего сообщения команды общего плана, с символом команды.
 	unless (defined $reply) {
- 		if ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(kde|кде)\s*$/ui) {
+		if ($is_command) {
+			if ($cmd =~ /^(kde|кде)\s*$/ui) {
 				my @phrases = (
 					'Нет, я не буду поднимать вам плазму.',
 					'Повторяйте эту мантру по утрам не менее 5 раз: "Плазма не падает." И, возможно, она перестанет у вас падать.',
@@ -218,7 +238,8 @@ my $parse_message = sub {
 				);
 
 				$reply = $phrases[irand ($#phrases + 1)];
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(coin|монетка)$/ui) {
+			} elsif ($cmd =~ /^(coin|монетка)$/ui) {
+				# Нам тут говорили, что есть некая вероятность, что монета упадёт ребром... И даже цифры называли.
 				if (rand (101) < 0.016) {
 					$reply = 'ребро';
 				} else {
@@ -236,27 +257,24 @@ my $parse_message = sub {
 						}
 					}
 				}
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(roll|dice|кости')$/ui) {
+			} elsif ($cmd =~ /^(roll|dice|кости)$/ui) {
 				$reply = sprintf 'На первой кости выпало %d, а на второй — %d.', irand (6) + 1, irand (6) + 1;
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(ver|version|версия)$/ui) {
+			} elsif ($cmd =~ /^(ver|version|версия)$/ui) {
 				$reply = 'Версия:  Четыре.Технологическое_превью';
-		} elsif ($m->{message} =~ /^\Q$m->{misc}->{csign}\E(lat|лат)\s*$/ui) {
+			} elsif ($cmd =~ /^(lat|лат)\s*$/ui) {
 				$reply = Lat ();
 			}
 		}
+	}
 
 	# У нас уже есть чего ответить, нам попалась известная фраза, на которую одинаковый ответ, независимо от типа
 	# общения - публичного или приватного.
 	if (defined $reply) {
 		if ($m->{misc}->{answer}) {
+			$answer->{message} = $reply;
+
 			$self->json ($send_to)->notify (
-				$send_to => {
+				$send_to => $answer,
-					from    => 'craniac',
-					userid  => $userid,
-					chatid  => $chatid,
-					plugin  => $m->{plugin},
-					message => $reply,
-				},
 			);
 		}
 	} else {
@@ -294,14 +312,10 @@ my $parse_message = sub {
 
 			# TODO: дописать запрос в webapp, для easter egg-ов, либо делать это на уровне aleesa-misc
 			if (defined ($reply) && $m->{misc}->{answer}) {
+				$answer->{message} = $reply;
+
 				$self->json ($send_to)->notify (
-					$send_to => {
+					$send_to => $answer,
-						from    => 'craniac',
-						userid  => $userid,
-						chatid  => $chatid,
-						plugin  => $m->{plugin},
-						message => $reply,
-					},
 				);
 
 				return;
@@ -319,14 +333,10 @@ my $parse_message = sub {
 			}
 
 			if (defined ($reply) && $m->{misc}->{answer}) {
+				$answer->{message} = $reply;
+
 				$self->json ($send_to)->notify (
-					$send_to => {
+					$send_to => $answer,
-						from    => 'craniac',
-						userid  => $userid,
-						chatid  => $chatid,
-						plugin  => $m->{plugin},
-						message => $reply,
-					},
 				);
 
 				return;
@@ -334,56 +344,49 @@ my $parse_message = sub {
 		}
 
 		# Попадаем сюда только если входящая фраза не распознана ранее как ключевая.
-		if ($m->{misc}->{answer}) {
+		my $cid;
-			# Пытаемся что-то генерировать, если фраза длиннее 3-х букв
-			if (length ($m->{message}) > 3) {
-				my $telegram = 0;
 
 		if ($m->{plugin} eq 'telegram') {
-					$telegram = 1;
+			$cid = $chatid;
+		} else {
+			$cid = sha256_hex (sprintf '%s/%s', $m->{plugin}, $chatid);
 		}
 
+		if ($m->{misc}->{answer}) {
+			# Пытаемся что-то генерировать, если фраза длиннее 3-х букв.
+			if (length ($m->{message}) > 3) {
 				# Lazy brain init
-				if (brains ($chatid, $telegram)) {
+				if (brains ($m->{plugin}, $cid)) {
-					$reply = $hailo->{$chatid}->learn_reply ($m->{message});
+					$reply = $hailo->{$cid}->learn_reply ($m->{message});
 
-					# Если из реактора вернулся undef выдаём "общую" фразу из словаря
+					# Если из реактора вернулся undef выдаём "общую" фразу из словаря.
 					unless (defined $reply) {
 						$reply = RandomCommonPhrase ();
 					} else {
-						# Если из реактора вернулась пустота выдаём "общую" фразу из словаря
+						# Если из реактора вернулась пустота выдаём "общую" фразу из словаря.
 						if ($reply eq '') {
 							$reply = RandomCommonPhrase ();
 						}
 
-						# Если сгенерированная фраза слишком похожа на начальную - выдаём "общую" фразу из словаря
+						# Если сгенерированная фраза слишком похожа на начальную - выдаём "общую" фразу из словаря.
 						if (fmatch (lc ($m->{message}), lc ($reply))) {
 							$reply = RandomCommonPhrase ();
 						}
 					}
 
+					$answer->{message} = $reply;
+
 					$self->json ($send_to)->notify (
-						$send_to => {
+						$send_to => $answer,
-							from    => 'craniac',
-							userid  => $userid,
-							chatid  => $chatid,
-							plugin  => $m->{plugin},
-							message => $reply,
-						},
 					);
 				}
 			}
 		} else {
-			# пытаемся что-то запоминать, если фраза длиннее 3-х букв
+			# Пытаемся что-то запоминать, если фраза длиннее 3-х букв
 			if (length ($m->{message}) > 3) {
-				my $telegram = 0;
+				# Lazy brain init
-
+				if (brains ($m->{plugin}, $cid)) {
-				if ($m->{plugin} eq 'telegram') {
+					$hailo->{$cid}->learn ($m->{message});
-					$telegram = 1;
-				}
-
-				if (brains ($chatid, $telegram)) {
-					$hailo->{$chatid}->learn ($m->{message});
 				}
 			}
 		}
@@ -445,10 +448,9 @@ sub RunCraniac () {
 		);
 	}
 
-	Mojo::IOLoop::Signal->on (
+	Mojo::IOLoop::Signal->on (TERM => $__signal_handler);
-		TERM => $__signal_handler,
+	Mojo::IOLoop::Signal->on (INT  => $__signal_handler);
-		INT  => $__signal_handler,
+	Mojo::IOLoop::Signal->on (QUIT => $__signal_handler);
-	);
 
 	do { Mojo::IOLoop->start } until Mojo::IOLoop->is_running;
 	return;