<div dir="rtl"><div dir="rtl"><div dir="ltr">Well, it is a little bit complicated to explain. Basicly, I monitored all the queries that are running and I saw that the huge diff in performance is generated because of the next query : </div><div dir="ltr"> select columns from table_name </div><div dir="ltr">where col1 in(..) </div><div dir="ltr">and (col2 in (...) or col3 in (...))</div><div dir="ltr">and col4in (...)<br></div><div dir="ltr"><br></div><div dir="ltr">We run this query a lot of times and the diff between performance is about 70% in most of the times.</div></div></div><br><div class="gmail_quote"><div dir="rtl">‫בתאריך יום ג׳, 25 בדצמ׳ 2018 ב-8:35 מאת ‪Tatsuo Ishii‬‏ &lt;‪<a href="mailto:ishii@sraoss.co.jp">ishii@sraoss.co.jp</a>‬‏&gt;:‬<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">BTW, x4.5 slowness sounds unusual. What is your application doing?<br>
<br>
Best regards,<br>
--<br>
Tatsuo Ishii<br>
SRA OSS, Inc. Japan<br>
English: <a href="http://www.sraoss.co.jp/index_en.php" rel="noreferrer" target="_blank">http://www.sraoss.co.jp/index_en.php</a><br>
Japanese:<a href="http://www.sraoss.co.jp" rel="noreferrer" target="_blank">http://www.sraoss.co.jp</a><br>
<br>
&gt; 40% loss is for typical light weight query case. For heavier query,<br>
&gt; for example something like, SELECT count(*) FROM really_big_table,<br>
&gt; performance loss will be pretty subtle.<br>
&gt; <br>
&gt; But if you want really low performance loss (for example less than<br>
&gt; 10%) in any query, probably you&#39;d better to look for another<br>
&gt; solutions.<br>
&gt; <br>
&gt; Best regards,<br>
&gt; --<br>
&gt; Tatsuo Ishii<br>
&gt; SRA OSS, Inc. Japan<br>
&gt; English: <a href="http://www.sraoss.co.jp/index_en.php" rel="noreferrer" target="_blank">http://www.sraoss.co.jp/index_en.php</a><br>
&gt; Japanese:<a href="http://www.sraoss.co.jp" rel="noreferrer" target="_blank">http://www.sraoss.co.jp</a><br>
&gt; <br>
&gt;&gt; The load average was pretty normal in both cases so I dont think that<br>
&gt;&gt; limited resources are the root cause here. 40% performance loss is pretty<br>
&gt;&gt; big number, isnt there a way to debug it ?<br>
&gt;&gt; <br>
&gt;&gt; ‫בתאריך יום א׳, 23 בדצמ׳ 2018 ב-13:49 מאת ‪Tatsuo Ishii‬‏ &lt;‪<br>
&gt;&gt; <a href="mailto:ishii@sraoss.co.jp" target="_blank">ishii@sraoss.co.jp</a>‬‏&gt;:‬<br>
&gt;&gt; <br>
&gt;&gt;&gt; Hi,<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Pgpool-II needs to store and forward each network packet from clients<br>
&gt;&gt;&gt; and PostgreSQL.  So usually about 40% performance loss is expected<br>
&gt;&gt;&gt; comparing with direct connecting to PostgreSQL.  That says, if your<br>
&gt;&gt;&gt; application&#39;s SELECT reads a lot of rows for example, it may take more<br>
&gt;&gt;&gt; time.<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Another point of consideration is, hardware resources especially CPU,<br>
&gt;&gt;&gt; memory and network. In your test case #1, on node A only applications<br>
&gt;&gt;&gt; and walreciver use CPU, On the other hand in test case #2, on node A<br>
&gt;&gt;&gt; the applications, Pgpool-II and walreciver use CPU. So it maybe<br>
&gt;&gt;&gt; possible Pgpool-II cannot get enough CPU. Have you checked resource<br>
&gt;&gt;&gt; usage?<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Best regards,<br>
&gt;&gt;&gt; --<br>
&gt;&gt;&gt; Tatsuo Ishii<br>
&gt;&gt;&gt; SRA OSS, Inc. Japan<br>
&gt;&gt;&gt; English: <a href="http://www.sraoss.co.jp/index_en.php" rel="noreferrer" target="_blank">http://www.sraoss.co.jp/index_en.php</a><br>
&gt;&gt;&gt; Japanese:<a href="http://www.sraoss.co.jp" rel="noreferrer" target="_blank">http://www.sraoss.co.jp</a><br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &gt; I meant that max_connection is set to 500. I did the same text with<br>
&gt;&gt;&gt; &gt; num_init_children=500 but same performance(because my app doesnt use in<br>
&gt;&gt;&gt; &gt; this architecture more then 200 connections..).<br>
&gt;&gt;&gt; &gt;<br>
&gt;&gt;&gt; &gt; ‫בתאריך יום א׳, 23 בדצמ׳ 2018 ב-10:29 מאת ‪Pierre Timmermans‬‏ &lt;‪<br>
&gt;&gt;&gt; &gt; <a href="mailto:ptim007@yahoo.com" target="_blank">ptim007@yahoo.com</a>‬‏&gt;:‬<br>
&gt;&gt;&gt; &gt;<br>
&gt;&gt;&gt; &gt;&gt; What do you mean by &quot;My db has 500 max connections&quot; ? If you have 500<br>
&gt;&gt;&gt; &gt;&gt; concurrent connections, then you should set num_init_children to 500,<br>
&gt;&gt;&gt; &gt;&gt; because now you can have no more than 200 concurrent users (with pgpool<br>
&gt;&gt;&gt; a<br>
&gt;&gt;&gt; &gt;&gt; connection is released from the pgpool only if it the session<br>
&gt;&gt;&gt; disconnects<br>
&gt;&gt;&gt; &gt;&gt; from postgres)<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; Pierre<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; On Sunday, December 23, 2018, 9:26:17 AM GMT+1, Mariel Cherkassky &lt;<br>
&gt;&gt;&gt; &gt;&gt; <a href="mailto:mariel.cherkassky@gmail.com" target="_blank">mariel.cherkassky@gmail.com</a>&gt; wrote:<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; Hi,<br>
&gt;&gt;&gt; &gt;&gt; I&#39;m using pgpool and I&#39;m suffering from very poor performance issues<br>
&gt;&gt;&gt; when<br>
&gt;&gt;&gt; &gt;&gt; using the pool. I have the next architecture  :<br>
&gt;&gt;&gt; &gt;&gt; 1)Node A, contains the application,standby database and pgpool service.<br>
&gt;&gt;&gt; &gt;&gt; 2)Node B contains the primary db and pgpool service that will be used<br>
&gt;&gt;&gt; only<br>
&gt;&gt;&gt; &gt;&gt; in failover.<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; I did the next 2 tests :<br>
&gt;&gt;&gt; &gt;&gt; -In the first test, the application on node A access the DB on node B<br>
&gt;&gt;&gt; &gt;&gt; directly, without connecting to the pool. I run one of our application`s<br>
&gt;&gt;&gt; &gt;&gt; major procedures and it took 40s.<br>
&gt;&gt;&gt; &gt;&gt; -In the second test, the application on node A access the pool on node A<br>
&gt;&gt;&gt; &gt;&gt; and it redirects the queries to node B. I run the same procedure and it<br>
&gt;&gt;&gt; &gt;&gt; took 3minutes.<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; My db has 500 max connections and the application has only 1 user and 1<br>
&gt;&gt;&gt; db<br>
&gt;&gt;&gt; &gt;&gt; so I set the num_init_children to be 200 and pool_size to be 1.<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; Any idea how can I tune the pgpool ?<br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt; &gt;&gt; Thanks.<br>
&gt;&gt;&gt; &gt;&gt; _______________________________________________<br>
&gt;&gt;&gt; &gt;&gt; pgpool-general mailing list<br>
&gt;&gt;&gt; &gt;&gt; <a href="mailto:pgpool-general@pgpool.net" target="_blank">pgpool-general@pgpool.net</a><br>
&gt;&gt;&gt; &gt;&gt; <a href="http://www.pgpool.net/mailman/listinfo/pgpool-general" rel="noreferrer" target="_blank">http://www.pgpool.net/mailman/listinfo/pgpool-general</a><br>
&gt;&gt;&gt; &gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt; _______________________________________________<br>
&gt; pgpool-general mailing list<br>
&gt; <a href="mailto:pgpool-general@pgpool.net" target="_blank">pgpool-general@pgpool.net</a><br>
&gt; <a href="http://www.pgpool.net/mailman/listinfo/pgpool-general" rel="noreferrer" target="_blank">http://www.pgpool.net/mailman/listinfo/pgpool-general</a><br>
</blockquote></div>