[groonga-dev,04774] Re: 結果サイズの大きいselectの実行結果が空になる

Back to archive index
Yutaro Shimamura yu****@irx*****
2019年 8月 14日 (水) 13:39:01 JST


島村です。対応ありがとうございました!

106f1b04 で試したところ、レコードが正常に出力されることを確認しました。

参考までに、実行時間の計測結果は以下のようになりました。

(8.0.7)
  real    6m57.928s
  user    5m14.108s
  sys     0m10.436s

(106f1b04)
  real    9m21.162s
  user    5m48.148s
  sys     0m15.624s

ひとまずは出力ができるようになって助かりました!


On Wed, Aug 14, 2019 at 11:45 AM Sutou Kouhei <kou****@clear*****> wrote:
>
> 須藤です。
>
> 再現環境を提供してもらって原因を調べました。
> 結果が4GiBを超えていて内部で使っているバッファーオブジェクト
> の容量が溢れていたのが原因でした。
>
> バッファーオブジェクトを4GiB以上も扱えるようにしました。
> が、内部的にはナイーブにrealloc()しているだけなので、扱えて
> もそんなに効率がよくないと思います。。。
>
> In <CAFRN1MAHHzXjXbrLLRrWoPsx6bsFo45N_9rgbY****@mail*****>
>   "[groonga-dev,04772] Re: 結果サイズの大きいselectの実行結果が空になる" on Fri, 9 Aug 2019 09:51:08 +0900,
>   Yutaro Shimamura <yu****@irx*****> wrote:
>
> > 須藤さん
> >
> > もちろん提供可能です!
> > 環境自体を提供するので、そちらを利用していただければと思います。
> >
> > 別途個別にアカウント情報を連絡します。
> >
> >
> > On Fri, Aug 9, 2019 at 9:40 AM Sutou Kouhei <kou****@clear*****> wrote:
> >>
> >> 須藤です。
> >>
> >> In <CAFRN1MCopLBY+3Ui=k3jt1****@mail*****>
> >>   "[groonga-dev,04770] 結果サイズの大きいselectの実行結果が空になる" on Fri, 9 Aug 2019 09:28:50 +0900,
> >>   Yutaro Shimamura <yu****@irx*****> wrote:
> >>
> >> > dumpではなくselectを使って大きなサイズになる結果を取得しようとすると、実行結果が空になってしまいます。
> >>
> >> うーん、なんでかしら。
> >> はじめて聞きました。
> >>
> >> ログになにも残っていないということなのでデバッガーで追ってみ
> >> ないとなんともという感じなのですが再現するデータを提供しても
> >> らうことはできますか?
> >>
> >>
> >> --
> >> 須藤 功平 <kou****@clear*****>
> >> 株式会社クリアコード <https://www.clear-code.com/>
> >>
> >> Groongaベースの全文検索システムを総合サポート:
> >>   http://groonga.org/ja/support/
> >> データ処理ツールの開発:
> >>   https://www.clear-code.com/blog/2018/7/11.html
> >>
> >> _______________________________________________
> >> groonga-dev mailing list
> >> groon****@lists*****
> >> https://lists.osdn.me/mailman/listinfo/groonga-dev
> > _______________________________________________
> > groonga-dev mailing list
> > groon****@lists*****
> > https://lists.osdn.me/mailman/listinfo/groonga-dev
>
> _______________________________________________
> groonga-dev mailing list
> groon****@lists*****
> https://lists.osdn.me/mailman/listinfo/groonga-dev


groonga-dev メーリングリストの案内
Back to archive index