Universal SMTP Server - Miksi verkkopalvelut?

Yleiskatsaus
Komponenttipohjaisesta ohjelmoinnista on tullut suositumpaa kuin koskaan. Nykyään rakennetaan tuskin sovellusta, jossa ei käytettäisi komponentteja jossakin muodossa, yleensä eri valmistajilta. Sovellusten kehittyessä yhä monimutkaisemmiksi on myös kasvanut tarve hyödyntää etäkoneisiin hajautettuja komponentteja.

Esimerkki komponenttipohjaisesta sovelluksesta on kokonaisvaltainen sähköisen kaupankäynnin ratkaisu. Web-farmilla sijaitsevan sähköisen kaupankäynnin sovelluksen on lähetettävä tilauksia taustajärjestelmän toiminnanohjaussovellukseen (ERP). Monissa tapauksissa ERP-sovellus sijaitsee eri laitteistossa ja saattaa toimia eri käyttöjärjestelmässä.

Microsoftin Distributed Component Object Model (DCOM) on hajautettu objekti-infrastruktuuri, jonka avulla sovellus voi kutsua toiseen palvelimeen asennettuja Component Object Model (COM) -komponentteja, ja se on siirretty useille muille kuin Windows-alustoille. DCOM ei kuitenkaan ole koskaan saanut laajaa hyväksyntää näillä alustoilla, joten sitä käytetään harvoin helpottamaan Windows- ja muiden kuin Windows-tietokoneiden välistä viestintää. Toiminnanohjausohjelmistojen toimittajat luovat usein Windows-alustalle komponentteja, jotka kommunikoivat taustajärjestelmän kanssa oman protokollan avulla.

Jotkin sähköisen kaupankäynnin sovelluksen käyttämät palvelut eivät välttämättä sijaitse lainkaan datakeskuksessa. Jos sähköisen kaupankäynnin sovellus esimerkiksi hyväksyy luottokorttimaksun asiakkaan ostamista tavaroista, sen on käytettävä kauppapankin palveluja asiakkaan luottokorttitietojen käsittelyyn. Käytännössä DCOM ja siihen liittyvät tekniikat, kuten CORBA ja Java RMI, rajoittuvat kuitenkin sovelluksiin ja komponentteihin, jotka on asennettu yrityksen datakeskukseen. Kaksi tärkeintä syytä tähän on se, että nämä tekniikat käyttävät oletusarvoisesti omia protokollia ja että nämä protokollat ovat luonnostaan yhteyspainotteisia.

Internetin kautta palvelimen kanssa kommunikoivilla asiakkailla on lukuisia mahdollisia esteitä yhteydenpidossa palvelimen kanssa. Tietoturvatietoiset verkonvalvojat ympäri maailmaa ovat ottaneet käyttöön yritysreitittimiä ja palomuureja, jotka estävät käytännössä kaikenlaisen Internetin kautta tapahtuvan viestinnän. Tarvitaan usein jumalan teko, jotta verkonvalvoja saa avattua portteja enemmän kuin välttämättömät portit.

Jos olet onnekas ja saat verkonvalvojan avaamaan asianmukaiset portit palvelusi tueksi, asiakkaasi eivät todennäköisesti ole yhtä onnekkaita. Tämän vuoksi DCOM:n, CORBA:n ja Java RMI:n kaltaiset omat protokollat eivät ole käytännöllisiä Internet-skenaarioissa.

Kuten sanoin, toinen ongelma näissä tekniikoissa on se, että ne ovat luonnostaan yhteyspainotteisia eivätkä siksi pysty käsittelemään verkon keskeytyksiä sujuvasti. Koska Internet ei ole suorassa hallinnassasi, et voi tehdä oletuksia yhteyden laadusta tai luotettavuudesta. Jos verkkoon tulee katkos, asiakkaan seuraava kutsu palvelimelle saattaa epäonnistua.

Näiden tekniikoiden yhteyspainotteinen luonne tekee myös haasteelliseksi rakentaa suuren skaalautuvuuden saavuttamiseksi tarvittavia kuormitustasapainotettuja infrastruktuureja. Kun asiakkaan ja palvelimen välinen yhteys katkeaa, seuraavaa pyyntöä ei voi yksinkertaisesti ohjata toiselle palvelimelle.

Kehittäjät ovat yrittäneet voittaa nämä rajoitukset hyödyntämällä mallia nimeltä valtioton ohjelmointi, mutta niiden menestys on ollut rajallista, koska tekniikat ovat melko raskaita ja yhteyden muodostaminen etäobjektiin on kallista.

Koska asiakkaan luottokortin käsittely tapahtuu Internetissä sijaitsevalla etäpalvelimella, DCOM ei ole ihanteellinen väline sähköisen kaupankäynnin asiakkaan ja luottokortin käsittelypalvelimen välisen viestinnän helpottamiseksi. Kuten toiminnanohjausratkaisussa, kolmannen osapuolen komponentti asennetaan usein asiakkaan datakeskukseen (tässä tapauksessa luottokorttien käsittelyratkaisun tarjoajan toimesta). Tämä komponentti toimii vain välittäjänä, joka helpottaa sähköisen kaupankäynnin ohjelmiston ja kauppapankin välistä viestintää oman protokollan avulla.

Näetkö tässä kaavaa? Koska nykyisten tekniikoiden rajoitukset tietokonejärjestelmien välisen viestinnän helpottamisessa ovat olleet rajalliset, ohjelmistojen toimittajat ovat usein turvautuneet oman infrastruktuurinsa rakentamiseen. Tämä tarkoittaa, että resurssit, joita olisi voitu käyttää toiminnanohjausjärjestelmän tai luottokorttien käsittelyjärjestelmän toimintojen parantamiseen, on sen sijaan käytetty omien verkkoprotokollien kirjoittamiseen.

Pyrkiessään tukemaan paremmin tällaisia Internet-skenaarioita Microsoft otti aluksi käyttöön strategian, jossa se täydensi olemassa olevia tekniikoitaan, kuten COM Internet Services (CIS), jonka avulla voit luoda DCOM-yhteyden asiakkaan ja etäosan välille portin 80 kautta. Eri syistä CIS:tä ei hyväksytty laajalti.

Tuli selväksi, että tarvittiin uusi lähestymistapa. Niinpä Microsoft päätti ratkaista ongelman alhaalta ylöspäin. Tarkastellaan joitakin vaatimuksia, jotka ratkaisun oli täytettävä menestyäkseen.

  • Yhteentoimivuus Muilla alustoilla olevien asiakkaiden on voitava käyttää etäpalvelua.
  • Internet-ystävällisyys Ratkaisun pitäisi toimia hyvin sellaisten asiakkaiden tukemisessa, jotka käyttävät etäpalvelua Internetistä.
  • Vahvasti tyypitetyt rajapinnat Etäpalveluun lähetettävien ja sieltä vastaanotettavien tietojen tyypistä ei saa olla epäselvyyttä. Lisäksi etäpalvelun määrittelemien tietotyyppien pitäisi sopia kohtuullisen hyvin useimpien proseduraalisten ohjelmointikielten määrittelemiin tietotyyppeihin.
  • Kyky hyödyntää nykyisiä Internet-standardeja Etäpalvelun toteutuksessa olisi hyödynnettävä mahdollisimman paljon nykyisiä Internet-standardeja ja vältettävä keksimästä uudelleen ratkaisuja jo ratkaistuihin ongelmiin. Laajasti hyväksyttyihin Internet-standardeihin perustuvassa ratkaisussa voidaan hyödyntää olemassa olevia työkaluja ja teknologiaa varten luotuja tuotteita.
  • Tuki mille tahansa kielelle Ratkaisun ei pitäisi olla tiukasti sidottu tiettyyn ohjelmointikieleen. Esimerkiksi Java RMI on tiukasti sidottu Java-kieleen. Visual Basicista tai Perlistä olisi vaikea kutsua toiminnallisuutta etä-Java-objektiin. Asiakkaan pitäisi pystyä toteuttamaan uusi verkkopalvelu tai käyttämään olemassa olevaa verkkopalvelua riippumatta siitä, millä ohjelmointikielellä asiakas on kirjoitettu.
  • Tuki mille tahansa hajautetulle komponentti-infrastruktuurille Ratkaisun ei pitäisi olla tiukasti sidottu tiettyyn komponentti-infrastruktuuriin. Itse asiassa sinun ei pitäisi joutua hankkimaan, asentamaan tai ylläpitämään hajautettua objekti-infrastruktuuria vain rakentaaksesi uuden etäpalvelun tai kuluttaaksesi olemassa olevaa palvelua. Taustalla olevien protokollien pitäisi helpottaa olemassa olevien hajautettujen olioinfrastruktuurien, kuten DCOM:n ja CORBA:n, välistä perusyhteyttä.

Tämän kirjan otsikon perusteella ei liene yllätys, että Microsoftin luoma ratkaisu tunnetaan nimellä Verkkopalvelut. Verkkopalvelu tarjoaa rajapinnan, jonka avulla tietty toiminto voidaan käynnistää asiakkaan puolesta. Asiakas voi käyttää verkkopalvelua Internet-standardien avulla.

Verkkopalvelujen rakennuspalikat
Seuraavassa kuvassa on esitetty kahden sovelluksen välisen etäyhteyden mahdollistamiseen tarvittavat keskeiset rakennuspalikat.

Keskustellaanpa kunkin rakennuspalikan tarkoituksesta. Koska moni lukija tuntee DCOM:n, mainitsen myös kunkin rakennuspalikan DCOM-ekvivalentin.

  • Discovery Asiakassovellus, joka tarvitsee pääsyn verkkopalvelun tarjoamiin toimintoihin, tarvitsee keinon selvittää etäpalvelun sijainti. Tämä tapahtuu prosessin avulla, jota kutsutaan yleisesti nimellä löytö. Löytämistä voidaan helpottaa keskitetyn hakemiston avulla sekä tapauskohtaisemmilla menetelmillä. DCOM:ssä Service Control Manager (SCM) tarjoaa löytöpalveluja.
  • Kuvaus Kun tietyn verkkopalvelun päätepiste on määritetty, asiakas tarvitsee riittävästi tietoa voidakseen toimia sen kanssa asianmukaisesti. Web-palvelun kuvaus sisältää jäsenneltyä metatietoa rajapinnasta, jota asiakassovelluksen on tarkoitus käyttää, sekä kirjallista dokumentaatiota Web-palvelusta, mukaan lukien käyttöesimerkkejä. DCOM-komponentti paljastaa rajapinnoistaan strukturoitua metatietoa tyyppikirjaston (typelib) kautta. Komponentin typelibin sisältämä metatieto on tallennettu omaan binäärimuotoon, ja sitä käytetään oman sovellusohjelmointirajapinnan (API) kautta.
  • Viestin muoto Tietojen vaihtamiseksi asiakkaan ja palvelimen on sovittava yhteisestä tavasta koodata ja muotoilla viestit. Vakioitu tapa koodata tietoja varmistaa, että palvelin tulkitsee asiakkaan koodaamat tiedot oikein. DCOM:ssä asiakkaan ja palvelimen väliset viestit muotoillaan DCOM Object RPC (ORPC) -protokollassa määritellyllä tavalla.

Ilman vakiomuotoista tapaa muotoilla viestit on lähes mahdotonta kehittää työkaluja, joilla kehittäjät voidaan irrottaa taustalla olevista protokollista. Kun kehittäjän ja taustalla olevien protokollien väliin luodaan abstraktiokerros, kehittäjä voi keskittyä enemmän käsillä olevaan liiketoimintaongelmaan ja vähemmän ratkaisun toteuttamiseen tarvittavaan infrastruktuuriin.

  • Koodaus Asiakkaan ja palvelimen välillä lähetettävät tiedot on koodattava viestin runkoon. DCOM käyttää binäärikoodausjärjestelmää asiakkaan ja palvelimen välillä vaihdettujen parametrien sisältämien tietojen sarjallistamiseen.
  • Liikenne Kun viesti on muotoiltu ja tiedot sarjallistettu viestin runkoon, viesti on siirrettävä asiakkaan ja palvelimen välillä jonkin siirtoprotokollan välityksellä. DCOM tukee useita omia protokollia, jotka on sidottu useisiin verkkoprotokolliin, kuten TCP:hen, SPX:ään, NetBEUI:hin ja NetBIOS over IPX:ään.

Verkkopalvelujen suunnittelupäätökset

Keskustellaanpa näistä verkkopalvelujen rakennuspalikoista ja niiden taustalla olevista suunnittelupäätöksistä.

Siirtoprotokollien valitseminen

Ensimmäiseksi määritettiin, miten asiakas ja palvelin kommunikoivat keskenään. Asiakas ja palvelin voivat sijaita samassa lähiverkossa, mutta asiakas voi mahdollisesti kommunikoida palvelimen kanssa Internetin kautta. Siksi siirtoprotokollan on sovelluttava yhtä hyvin lähiverkko- ja Internet-ympäristöihin.

As I mentioned earlier, technologies such as DCOM, CORBA, and Java RMI are ill suited for supporting communication between the client and the server over the Internet. Protocols such as Hypertext Transfer Protocol (HTTP) and Simple Mail Transfer Protocol (SMTP) are proven Internet protocols. HTTP defines a request/response messaging pattern for submitting a request and getting an associated response. SMTP defines a routable messaging protocol for asynchronous communication. Let’s examine why HTTP and SMTP are well suited for the Internet.

HTTP-based Web applications are inherently stateless. They do not rely on a continuous connection between the client and the server. This makes HTTP an ideal protocol for high-availability configurations such as firewalls. If the server that handled the client’s original request becomes unavailable, subsequent requests can be automatically routed to another server without the client knowing or caring.

Almost all companies have an infrastructure in place that supports SMTP. SMTP is well suited for asynchronous communication. If service is disrupted, the e-mail infrastructure automatically handles retries. Unlike with HTTP, you can pass SMTP messages to a local mail server that will attempt to deliver the mail message on your behalf.

The other significant advantage of both HTTP and SMTP is their pervasiveness. Employees have come to rely on both e-mail and their Web browsers, and network administrators have a high comfort level supporting these services. Technologies such as network address translation (NAT) and proxy servers provide a way to access the Internet via HTTP from within otherwise isolated corporate LANs. Administrators will often expose an SMTP server that resides inside the firewall. Messages posted to this server will then be routed to their final destination via the Internet.

In the case of credit card processing software, an immediate response is needed from the merchant bank to determine whether the order should be submitted to the ERP system. HTTP, with its request/response message pattern, is well suited to this task.

Most ERP software packages are not capable of handling large volumes of orders that can potentially be driven from the e-commerce application. In addition, it is not imperative that the orders be submitted to the ERP system in real time. Therefore, SMTP can be leveraged to queue orders so that they can be processed serially by the ERP system.

If the ERP system supports distributed transactions, another option is to leverage Microsoft Message Queue Server (MSMQ). As long as the e-commerce application and the ERP system reside within the same LAN, connectivity via non-Internet protocols is less of an issue. The advantage MSMQ has over SMTP is that messages can be placed and removed from the queue within the scope of a transaction. If an attempt to process a message that was pulled off the queue fails, the message will automatically be placed back in the queue when the transaction aborts.

Choosing an Encoding Scheme

HTTP and SMTP provide a means of sending data between the client and the server. However, neither specifies how the data within the body of the message should be encoded. Microsoft needed a standard, platform-neutral way to encode data exchanged between the client and the server.

Because the goal was to leverage Internet-based protocols, Extensible Markup Language (XML) was the natural choice. XML offers many advantages, including cross-platform support, a common type system, and support for industry -standard character sets.

Binary encoding schemes such as those used by DCOM, CORBA, and Java RMI must address compatibility issues between different hardware platforms. For example, different hardware platforms have different internal binary representation of multi-byte numbers. Intel platforms order the bytes of a multi-byte number using the little endian convention; many RISC processors order the bytes of a multi-byte number using the big endian convention.

XML avoids binary encoding issues because it uses a text-based encoding scheme that leverages standard character sets. Also, some transport protocols, such as SMTP, can contain only text-based messages.

Binary methods of encoding, such as those used by DCOM and CORBA, are cumbersome and require a supporting infrastructure to abstract the developer from the details. XML is much lighter weight and easier to handle because it can be created and consumed using standard text-parsing techniques.

In addition, a variety of XML parsers are available to further simplify the creation and consumption of XML documents on practically every modern platform. XML is lightweight and has excellent tool support, so XML encoding allows incredible reach because practically any client on any platform can communicate with your Web service.

Choosing a Formatting Convention

It is often necessary to include additional metadata with the body of the message. For example, you might want to include information about the type of services that a Web service needs to provide in order to fulfill your request, such as enlisting in a transaction or routing information. XML provides no mechanism for differentiating the body of the message from its associated data.

Transport protocols such as HTTP provide an extensible mechanism for header data, but some data associated with the message might not be specific to the transport protocol. For example, the client might send a message that needs to be routed to multiple destinations, potentially over different transport protocols. If the routing information were placed into an HTTP header, it would have to be translated before being sent to the next intermediary over another transport protocol, such as SMTP. Because the routing information is specific to the message and not the transport protocol, it should be a part of the message.

Simple Object Access Protocol (SOAP) provides a protocol-agnostic means of associating header information with the body of the message. Every SOAP message must define an envelope. The envelope has a body that contains the payload of the message and a header that can contain metadata associated with the message.

SOAP imposes no restrictions on how the message body can be formatted. This is a potential concern because without a consistent way of encoding the data, it is difficult to develop a toolset that abstracts you from the underlying protocols. You might have to spend a fair amount of time getting up to speed on the Web service’s interface instead of solving the business problem at hand.

What was needed was a standard way of formatting a remote procedure call (RPC) message and encoding its list of parameters. This is exactly what Section 7 of the SOAP specification provides. It describes a standard naming convention and encoding style for procedure-oriented messages.

Because SOAP provides a standard format for serializing data into an XML message, platforms such as ASP.NET and Remoting can abstract away the details for you.

Choosing Description Mechanisms

SOAP provides a standard way of formatting messages exchanged between the Web service and the client. However, the client needs additional information in order to properly serialize the request and interpret the response. XML Schema provides a means of creating schemas that can be used to describe the contents of a message.

XML Schema provides a core set of built-in datatypes that can be used to describe the contents of a message. You can also create your own datatypes. For example, the merchant bank can create a complex datatype to describe the content and structure of the body of a message used to submit a credit card payment request.

A schema contains a set of datatype and element definitions. A Web service uses the schema not only to communicate the type of data that is expected to be within a message but also to validate incoming and outgoing messages.

A schema alone does not provide enough information to effectively describe a Web service, however. The schema does not describe the message patterns between the client and the server. For example, a client needs to know whether to expect a response when an order is posted to the ERP system. A client also needs to know over what transport protocol the Web service expects to receive requests. Finally, the client needs to know the address where the Web service can be reached.

This information is provided by a Web Services Description Language (WSDL) document. WSDL is an XML document that fully describes a particular Web service. Tools such as ASP.NET WSDL.exe and Remoting SOAPSUDS.exe can consume WSDL and automatically build proxies for the developer.

As with any component used to build software, a Web service should also be accompanied by written documentation for developers who program against the Web service. The documentation should describe what the Web service does, the interfaces it exposes, and some examples of how to use it. Good documentation is especially important if the Web service is exposed to clients over the Internet.

Choosing Discovery Mechanisms

Once you’ve developed and documented a Web service, how can potential clients locate it? If the Web service is designed to be consumed by a member of your development team, your approach can be pretty informal, such as sharing the URL of the WSDL document with your peer a couple of cubicles down. But when potential clients are on the Internet, advertising your Web service effectively is an entirely different story.

What’s needed is a common way to advertise Web services. Universal Description, Discovery, and Integration (UDDI) provides just such a mechanism. UDDI is an industry-standard centralized directory service that can be used to advertise and locate Web services. UDDI allows users to search for Web services using a host of search criteria, including company name, category, and type of Web service.

Web services can also be advertised via DISCO, a proprietary XML document format defined by Microsoft that allows Web sites to advertise the services they expose. DISCO defines a simple protocol for facilitating a hyperlink style for locating resources. The primary consumer of DISCO is Microsoft Visual Studio.NET. A developer can target a particular Web server and navigate through the various Web services exposed by the server.

What’s Missing from Web Services?

You might have noticed that some key items found within a distributed component infrastructure are not defined by Web services. Two of the more noticeable omissions are a well-defined API for creating and consuming Web services and a set of component services, such as support for distributed transactions. Let’s discuss each of these missing pieces.

  • Web service -specific API Most distributed component infrastructures define an API to perform such tasks as initializing the runtime, creating an instance of a component, and reflecting the metadata used to describe the component. Because most high-level programming languages provide some degree of interoperability with C, the API is usually exposed as a flat set of C method signatures. RMI goes so far as to tightly couple its API with a single high-level language, Java.

In an effort to ensure that Web services are programming language-agnostic, Microsoft has left it up to individual software vendors to bind support for Web services to a particular platform. I will discuss two Web service implementations for the.NET platform, ASP.NET and Remoting, later in the book.

  • Component services The Web services platform does not provide many of the services commonly found in distributed component infrastructures, such as remote object lifetime management, object pooling, and support for distributed transactions. These services are left up to the distributed component infrastructure to implement.

Some services, such as support for distributed transactions, can be introduced later as the technology matures. Others, such as object pooling and possibly object lifetime management, can be considered an implementation detail of the platform. For example, Remoting defines extensions to provide support for object lifetime management, and Microsoft Component Services provides support for object pooling.

Summary

Component-based programming has proven to be a boon to developer productivity, but some services cannot be encapsulated by a component that resides within the client’s datacenter. Legacy technologies such as DCOM, CORBA, and Java RMI are ill-suited to allowing clients to access services over the Internet, so Microsoft found it necessary to start from the bottom and build an industry-standard way of accessing remote services.

Verkkopalvelut is an umbrella term that describes a collection of industry- standard protocols and services used to facilitate a base-line level of interoperability between applications. The industry support that Web services has received is unprecedented. Never before have so many leading technology companies stepped up to support a standard that facilitates interoperability between applications, regardless of the platform on which they are run.

One of the contributing factors to the success of Web services is that they’re built on existing Internet standards such as XML and HTTP. As a result, any system capable of parsing text and communicating via a standard Internet transport protocol can communicate with a Web service. Companies can also leverage the investment they have already made in these technologies.

Kaikki tietävät, että luotettava SMTP-palvelin on avain siihen, että sähköpostiviestit toimitetaan oikein. Tiedetään myös hyvin, että KUKAAN ei enää tarjoa SMTP-palvelinta ilman todennusta tai avointa välitystä. MUTTA VOIT SILTI SAADA LAADUKKAAN SMTP-PALVELIMEN ILMAISEKSI KÄYTTÖÖSI!

Klikkaa tästä ILMAINEN SMTP-PALVELIN