trabajo-afectivo/test/unit/email_parser_test.rb

# encoding: utf-8
require 'test_helper'
 
class EmailParserTest < ActiveSupport::TestCase
  test 'parse' do
    files = [
      {
        :data     => IO.read('test/fixtures/mail1.box'),
        :body_md5 => 'b57d21dcac6b05e1aa67af51a9e4c1ec',
        :params   => {
          :from               => 'John.Smith@example.com',
          :from_email         => 'John.Smith@example.com',
          :from_display_name  => '',
          :subject            => 'CI Daten für PublicView ',
        },
      },
      {
        :data     => IO.read('test/fixtures/mail2.box'),
        :body_md5 => '154c7d3ae7b94f99589df62882841b08',
        :params   => {
          :from               => 'Martin Edenhofer <martin@example.com>',
          :from_email         => 'martin@example.com',
          :from_display_name  => 'Martin Edenhofer',
          :subject            => 'aaäöüßad asd',
          :body_md5           => "äöüß ad asd\n\n-Martin\n\n--\nOld programmers never die. They just branch to a new address.\n",
        },
      },
      {
        :data     => IO.read('test/fixtures/mail3.box'),
        :body_md5 => '96a0a7847c1c60e82058db8f8bff8136',
        :params   => {
          :from               => '"Günther John | Example GmbH" <k.guenther@example.com>',
          :from_email         => 'k.guenther@example.com',
          :from_display_name  => 'Günther John | Example GmbH',
          :subject            => 'Ticket Templates',
        },
      },
      {
        :data     => IO.read('test/fixtures/mail4.box'),
        :body_md5 => '2f2c3a5c233dbd9658ab37d39469b7d0',
        :params   => {
          :from               => '"Günther Katja | Example GmbH" <k.guenther@example.com>',
          :from_email         => 'k.guenther@example.com',
          :from_display_name  => 'Günther Katja | Example GmbH',
          :subject            => 'AW: Ticket Templates [Ticket#11168]',
          :body_md5     => "Hallo Katja,

super! Ich freu mich!

Wir würden gerne die Präsentation/Einführung in die Ticket Templates per Screensharing oder zumindest per Telefon machen.

Mögliche Termine:
o Do, 10.05.2012 15:00-16:00
o Fr,  11.05.2012 13:00-14:00
o Di,  15.05.2012 17:00-18:00

Über Feedback würde ich mich freuen!

PS: Zur besseren Übersicht habe ich ein Ticket erstellt. :) Im Footer sind unsere geschäftlichen Kontaktdaten (falls diese irgendwann einmal benötigt werden sollten), mehr dazu in ein paar Tagen.

Liebe Grüße!

 -Martin
",
        },
      },
      {
        :data     => IO.read('test/fixtures/mail5.box'),
        :body_md5 => 'f34033e9a34bb5367062dd5df21115df',
        :params   => {
          :from               => 'marc.smith@example.com (Marc Smith)',
          :from_email         => 'marc.smith@example.com',
          :from_display_name  => 'Marc Smith',
          :subject            => 'Re: XXXX Betatest Ticket Templates [Ticket#11162]',
        },
      },
      {
        :data     => IO.read('test/fixtures/mail6.box'),
        :body_md5 => '88c0c9e004021a4ed2a0c1e5f6b3455d',
        :params   => {
          :from               => '"Hans BÄKOSchönland" <me@bogen.net>',
          :from_email         => 'me@bogen.net',
          :from_display_name  => 'Hans BÄKOSchönland',
          :subject            => 'utf8: 使って / ISO-8859-1: Priorität"  / cp-1251: Сергей Углицких',
          :body         => "this is a test [1]Compare Cable, DSL or Satellite plans: As low as $2.95. 

Test1:8

Test2:&

Test3:&ni;

Test4:&

Test5:=



[1] http://localhost/8HMZENUS/2737??PS=
"
        },
      },
      {
        :data     => IO.read('test/fixtures/mail7.box'),
        :body_md5 => '6029e6b6106a6dd11ed887ec31f118ac',
        :params   => {
          :from               => 'Eike.Ehringer@example.com',
          :from_email         => 'Eike.Ehringer@example.com',
          :from_display_name  => '',
          :subject            => 'AW:Installation [Ticket#11392]',
          :body_md5     => "Hallo.
Jetzt muss ich dir noch kurzfristig absagen für morgen.
Lass uns evtl morgen Tel.

Mfg eike 

Martin Edenhofer via Znuny Team --- Installation [Ticket#11392] --- 
Von:\"Martin Edenhofer via Znuny Team\" <support@example.com>Aneike.xx@xx-corpxx.comDatum:Mi., 13.06.2012 14:30BetreffInstallation [Ticket#11392]
Hi Eike,
anbei wie gestern telefonisch besprochen Informationen zur Vorbereitung.
a) Installation von http://ftp.gwdg.de/pub/misc/zammad/RPMS/fedora/4/zammad-3.0.13-01.noarch.rpm (dieses RPM ist RHEL kompatible) und dessen Abhängigkeiten.
b) Installation von \"mysqld\" und \"perl-DBD-MySQL\".
Das wäre es zur Vorbereitung!
Bei Fragen nur zu!
-Martin
--
Martin Edenhofer
Znuny GmbH // Marienstraße 11 // 10117 Berlin // Germany
P: +49 (0) 30 60 98 54 18-0
F: +49 (0) 30 60 98 54 18-8
W: http://example.com 
Location: Berlin - HRB 139852 B Amtsgericht Berlin-Charlottenburg
Managing Director: Martin Edenhofer


",
        },
      },
      {
        :data         => IO.read('test/fixtures/mail8.box'),
        :body_md5     => 'ca502c70a1b006f5184d1f0bf79d5799',
        :attachments  => [
          {
            :md5      => 'c3ca4aab222eed8a148a716371b70129',
            :filename => 'message.html',
          },
        ],
        :params   => {
          :from               => 'Franz.Schaefer@example.com',
          :from_email         => 'Franz.Schaefer@example.com',
          :from_display_name  => '',
          :subject            => 'could not rename: ZZZAAuto',
          :body_md5     => "Gravierend?

Mit freundlichen Grüßen

Franz Schäfer
Manager Information Systems

Telefon 
+49 000 000 8565
franz.schaefer@example.com

Example Stoff GmbH
Fakultaet
Düsseldorfer Landstraße 395
D-00000 Hof
www.example.com


Geschäftsführung/Management Board: Jan Bauer (Vorsitzender/Chairman), 
Oliver Bauer, Heiko Bauer, Boudewijn Bauer
Sitz der Gesellschaft / Registered Office: Hof
Registergericht / Commercial Register of the Local Court: HRB 0000 AG 
Hof
",
        },
      },
      {
        :data         => IO.read('test/fixtures/mail9.box'),
        :body_md5     => 'c70de14cc69b17b07850b570d7a4fbe7',
        :attachments  => [
          {
            :md5      => '9964263c167ab47f8ec59c48e57cb905',
            :filename => 'message.html',
          },
          {
            :md5      => 'ddbdf67aa2f5c60c294008a54d57082b',
            :filename => 'super-seven.jpg',
          },
        ],
        :params   => {
          :from               => 'Martin Edenhofer <martin@example.de>',
          :from_email         => 'martin@example.de',
          :from_display_name  => 'Martin Edenhofer',
          :subject            => 'AW: OTRS / Anfrage OTRS Einführung/Präsentation [Ticket#11545]',
          :body         => "Enjoy!\n\n-Martin\n\n--\nOld programmers never die. They just branch to a new address.\n\n"
        },
      },
      {
        :data         => IO.read('test/fixtures/mail10.box'),
        :body_md5     => 'ddfad696bd34d83f607763180243f3c5',
        :attachments  => [
          {
            :md5      => '52d946fdf1a9304d0799cceb2fcf0e36',
            :filename => 'message.html',
          },
          {
            :md5      => 'a618d671348735744d4c9a4005b56799',
            :filename => 'image001.jpg',
          },
        ],
        :params   => {
          :from               => 'Smith Sepp <smith@example.com>',
          :from_email         => 'smith@example.com',
          :from_display_name  => 'Smith Sepp',
          :subject            => 'Gruß aus Oberalteich',
#          :body         => "Herzliche Grüße aus Oberalteich sendet Herrn Smith\n\n \n\nSepp Smith  - Dipl.Ing. agr. (FH)\n\nGeschäftsführer der example Straubing-Bogen\n\nKlosterhof 1 | 94327 Bogen-Oberalteich\n\nTel: 09422-505601 | Fax: 09422-505620\n\nInternet: http://example-straubing-bogen.de <http://example-straubing-bogen.de/> \n\nFacebook: http://facebook.de/examplesrbog <http://facebook.de/examplesrbog> \n\n   -  European Foundation für Quality Management\n\n"
        },
      },
      {
        :data         => IO.read('test/fixtures/mail11.box'),
        :body_md5     => 'cf8b26d9fc4ce9abb19a36ce3a130c79',
        :attachments  => [
          {
            :md5      => '08660cd33ce8c64b95bcf0207ff6c4d6',
            :filename => 'message.html',
          },
        ],
        :params   => {
          :from               => 'CYLEX Newsletter <carina.merkant@cylex.de>',
          :from_email         => 'carina.merkant@cylex.de',
          :from_display_name  => 'CYLEX Newsletter',
          :subject            => 'Eine schöne Adventszeit für ZNUNY GMBH - ENTERPRISE SERVICES FÜR OTRS',
          :to                 => 'enjoy_us@znuny.com',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail12.box'),
        :body_md5     => '8b48e082bc77e927d395448875259172',
        :attachments  => [
          {
            :md5      => '46cf0f95ea0c8211cbb704e1959b9173',
            :filename => 'message.html',
          },
          {
            :md5      => 'b6e70f587c4b1810facbb20bb5ec69ef',
            :filename => 'image002.png',
          },
        ],
        :params   => {
          :from               => 'Alex.Smith@example.com',
          :from_email         => 'Alex.Smith@example.com',
          :from_display_name  => '',
          :subject            => 'AW: Agenda [Ticket#11995]',
          :to                 => 'example@znuny.com',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail13.box'),
        :body_md5     => '58806e006b14b04a535784a5462d09b0',
        :attachments  => [
          {
            :md5      => '29cc1679f8a44c72be6be7c1da4278ac',
            :filename => 'message.html',
          },
        ],
        :params   => {
          :from               => 'thomas.smith@example.com',
          :from_email         => 'thomas.smith@example.com',
          :from_display_name  => '',
          :subject            => 'Antwort: Probleme ADB / Anlegen von Tickets [Ticket#111079]',
          :to                 => 'q1@znuny.com',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail14.box'),
        :body_md5     => '154c7d3ae7b94f99589df62882841b08',
        :attachments  => [
          {
            :md5      => '5536be23f647953dc39c1673205d6f5b',
            :filename => 'file-1',
          },
          {
            :md5      => '4eeeae078b920f9d0708353ba0f6aa63',
            :filename => 'file-2',
          },
        ],
        :params   => {
          :from               => '"Müller, Bernd" <Bernd.Mueller@example.com>',
          :from_email         => 'Bernd.Mueller@example.com',
          :from_display_name  => "Müller, Bernd",
          :subject            => 'AW: OTRS [Ticket#118192]',
          :to                 => '\'Martin Edenhofer via Znuny Sales\' <sales@znuny.com>',
        },
      },
      # spam email
      {
        :data         => IO.read('test/fixtures/mail15.box'),
        :body_md5     => 'd41d8cd98f00b204e9800998ecf8427e',
        :attachments  => [
          # :preferences=>{"Message-ID"=>"<temp@test>", "Content-Type"=>"application/octet-stream; name=\"\xBC\xA8\xD0\xA7\xB9\xDC\xC0\xED,\xBE\xBF\xBE\xB9\xCB\xAD\xB4\xED\xC1\xCB.xls\"", "Mime-Type"=>"application/octet-stream", "Charset"=>"UTF-8"}}
          # mutt c1abb5fb77a9d2ab2017749a7987c074
          {
            :md5      => '2ef81e47872d42efce7ef34bfa2de043',
            :filename => 'file-1',
          },
        ],
        :params   => {
          :from               => '"Sara.Gang" <ynbe.ctrhk@gmail.com>',
          :from_email         => 'ynbe.ctrhk@gmail.com',
          :from_display_name  => "Sara.Gang",
          :subject            => '绩效管理,究竟谁错了',
          :to                 => 'info42@znuny.com',
        },
      },
      # spam email
      {
        :data         => IO.read('test/fixtures/mail16.box'),
        :body_md5     => 'b255fb5620db3b63131924513061d974',
        :params   => {
          :from               => nil,
          :from_email         => 'vipyimin@126.com',
          :from_display_name  => "",
          :subject            => '【 直通美国排名第49大学 成功后付费 】',
          :to                 => '"enterprisemobility.apacservice" <enterprisemobility.apacservice@motorola.com>',
        },
      },
      # spam email
      {
        :data         => IO.read('test/fixtures/mail17.box'),
        :body_md5     => 'c32d6502f47435e613a2112625118270',
        :params   => {
          :from               => '"都琹" <ghgbwum@185.com.cn>',
          :from_email         => 'ghgbwum@185.com.cn',
          :from_display_name  => "都琹",
          :subject            => '【专业为您注册香港及海外公司（好处多多）】　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　人物                    互联网事百度新闻独家出品传媒换一批捷克戴维斯杯决赛前任命临时领队 前领队因病住院最新:盖世汽车讯 11月6日，通用汽车宣布今年10月份在华销量...减持三特索道 孟凯将全力发展湘鄂情江青摄影作品科技日报讯 （记者过国忠 通讯员陈飞燕）江苏省无线电科学研究所有限公司院士工作站日前正式建...[详细]',
          :to                 => 'info@znuny.com',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail18.box'),
        :body_md5     => '66f20e8557095762ccad9a6cb6f59c3a',
        :params   => {
          :from               => 'postmaster@example.com',
          :from_email         => 'postmaster@example.com',
          :from_display_name  => '',
          :subject            => 'Benachrichtung zum =?unicode-1-1-utf-7?Q?+ANw-bermittlungsstatus (Fehlgeschlagen)?=',
          :to                 => 'sales@znuny.org',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail19.box'),
        :body_md5     => '2fa47e9122f4c1b9c5057400529c7567',
        :params   => {
          :from               => '"我" <>',
          :from_email         => '"=?GB2312?B?ztI=?=" <>',
          :from_display_name  => '',
          :subject            => '《欧美简讯》',
          :to                 => '377861373 <377861373@qq.com>',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail20.box'),
        :body_md5     => 'd2b65203aaf2bbbd50fc73cb14d781bc',
        :params   => {
          :from               => 'Health and Care-Mall <drugs-cheapest8@sicor.com>',
          :from_email         => 'drugs-cheapest8@sicor.com',
          :from_display_name  => 'Health and Care-Mall',
          :subject            => 'The Highest Grade Drugs And EXTRA LOW Price .',
          :to                 => 'info2@znuny.com',
        },
      },
      {
        :data         => IO.read('test/fixtures/mail21.box'),
        :body_md5     => '9c08ff6ac8817e7dbea6d2ef04dc7bc3',
        :params   => {
          :from               => 'Viagra Super Force Online <pharmacy_affordable1@ertelecom.ru>',
          :from_email         => 'pharmacy_affordable1@ertelecom.ru',
          :from_display_name  => 'Viagra Super Force Online',
          :subject            => 'World Best DRUGS Mall For a Reasonable Price.',
          :to                 => 'info@znuny.nix',
        },
      },
    ]

    files.each { |file|
      parser = Channel::EmailParser.new
      data = parser.parse( file[:data] )

      # check body
      md5 = Digest::MD5.hexdigest( data[:body] )
      assert_equal( file[:body_md5], md5 )

      # check params
      file[:params].each { |key, value|
        if key.to_s == 'body_md5'
          puts 'md5'
          puts '++' + data[:body].to_s + '++'
          puts '++' + file[:params][key.to_sym].to_s + '++'
          assert_equal( Digest::MD5.hexdigest( file[:params][key.to_sym].to_s ), Digest::MD5.hexdigest( data[:body].to_s ) )
        else
          assert_equal( file[:params][key.to_sym], data[key.to_sym], "check #{key}" )
        end
      }

      # check attachments
      if file[:attachments]
        attachment_count_config = file[:attachments].length
        attachment_count_email = 0
        file[:attachments].each { |attachment|
          attachment_count_email += 1
          found = false
          data[:attachments].each { |attachment_parser|
            next if found
            file_md5 = Digest::MD5.hexdigest( attachment_parser[:data] )
#            puts 'Attachment:' + attachment_parser.inspect + '-' + file_md5
            if attachment[:md5] == file_md5
              found = true
              assert_equal( attachment[:filename], attachment_parser[:filename] )
            end
          }
          if !found
            assert( false, "Attachment not found! MD5: #{attachment[:md5]} - #{attachment[:filename].to_s}" )
          end
        }
        assert_equal( attachment_count_config, attachment_count_email )
      end
    }
  end
end