]> git.cworth.org Git - sup/blob - lib/sup/poll.rb
unified reporting of thread exceptions
[sup] / lib / sup / poll.rb
1 require 'thread'
2
3 module Redwood
4
5 class PollManager
6   include Singleton
7
8   DELAY = 300
9
10   def initialize
11     @polling = false
12     @last_poll = nil
13     
14     self.class.i_am_the_instance self
15
16     Redwood::reporting_thread do
17       while true
18         sleep DELAY / 2
19         poll if @last_poll.nil? || (Time.now - @last_poll) >= DELAY
20       end
21     end
22   end
23
24   def buffer
25     BufferManager.spawn_unless_exists("<poll for new messages>", :hidden => true) do
26       PollMode.new
27     end
28   end
29
30   def poll
31     BufferManager.flash "Polling for new messages..."
32     num, numi = buffer.mode.poll
33     if num > 0
34       BufferManager.flash "Loaded #{num} new messages, #{numi} to inbox." 
35     else
36       BufferManager.flash "No new messages."
37     end
38     [num, numi]
39   end
40
41   def do_poll
42     return [0, 0] if @polling
43     @polling = true
44     found = {}
45     total_num = 0
46     total_numi = 0
47
48     Index.usual_sources.each do |source|
49       next if source.done?
50       yield "Loading from #{source}... "
51
52       start_offset = nil
53       num = 0
54       num_inbox = 0
55       source.each do |offset, labels|
56         start_offset ||= offset
57         yield " Found message at #{offset} with labels #{labels * ', '}"
58         begin
59           m = Redwood::Message.new :source => source, :source_info => offset,
60                                    :labels => labels
61           if found[m.id]
62             yield "Skipping duplicate message #{m.id}"
63             next
64           else
65             found[m.id] = true
66           end
67           
68           if Index.add_message m
69             UpdateManager.relay :add, m
70             num += 1
71             total_num += 1
72             total_numi += 1 if m.labels.include? :inbox
73           end
74         rescue Redwood::MessageFormatError => e
75           yield "Ignoring erroneous message at #{source}##{offset}: #{e.message}"
76         end
77
78         if num % 1000 == 0 && num > 0
79           elapsed = Time.now - start
80           pctdone = (offset.to_f - start_offset) / (source.total.to_f - start_offset)
81           remaining = (source.end_offset.to_f - offset.to_f) * (elapsed.to_f / (offset.to_f - start_offset))
82           yield "## #{num} (#{(pctdone * 100.0)}% done) read; #{elapsed.to_time_s} elapsed; est. #{remaining.to_time_s} remaining"
83         end
84       end
85       yield "Found #{num} messages" unless num == 0
86     end
87     yield "Done polling; loaded #{total_num} new messages total"
88     @last_poll = Time.now
89     @polling = false
90     [total_num, total_numi]
91   end
92 end
93
94 end