از هنگامی که رایانه در تحلیل و ذخیره سازی داده ها بکار رفت (1950) پس از حدود 20 سال، حجم داده ها در پایگاه داده ها دو برابر شد. ولی پس از گذشت دو دهه و همزمان با پیشرفت فن آوری اطلاعات(IT) هر دو سال یکبار حجم داده ها، دو برابر شده و همچنین تعداد پایگاه داده ها با سرعت بیشتری رشد نمود. این در حالی است که تعداد متخصصین تحلیل داده ها با این سرعت رشد نکرد. حتی اگر چنین امری اتفاق می افتاد، بسیاری از پایگاه داده ها چنان گسترش یافته اند که شامل چندصد میلیون یا چندصد میلیارد رکورد ثبت شده هستند.امکان تحلیل و استخراج اطلاعات با روش های معمول آماری از دل انبوه داده ها مستلزم چند روز کار با رایانه های موجود است.[3]حال با وجود سیستم های یکپارچه اطلاعاتی، سیستم های یکپارچه بانکی و تجارت الکترونیک، لحظه به لحظه به حجم داده ها در پایگاه داده های مربوط اضافه شده و باعث به وجود آمدن حانبارهای عظیمی از داده ها شده است.این واقعیت، ضرورت کشف و استخراج سریع و دقیق دانش از این پایگاه داده ها را بیش از پیش نمایان کرده است، چنان که در عصر حاضر گفته می شود اطلاعات طلاست. هم اکنون در هر کشور، سازمان، شرکت و غیره برای امور بازرگانی، پرسنلی، آموزشی، آماری و غیره پایگاه داده ها ایجاد یا خریداری شده است. به طوری که این پایگاه داده ها برای مدیران، برنامه ریزان، پژوهشگران جهت، تصمیم گیری های راهبردی، تهیه گزارش های مختلف، توصیف وضعیت جاری خود و سایر اهداف می تواند مفید باشد. بسیاری از این داده ها از نرم افزارهای تجاری، مثل کاربردهای مالی، ERPها، CRMها و web log ها، می آیند. نتیجه این جمع آوری داده ها این می شود که در سازمانها، داده ها غنی ولی دانش ضعیف، است. جمع آوری داده ها، بسیار انبوه می شود و بسرعت اندازه آن افزایش می یابد و استفاده عملی از داده ها را محدود می سازد.[2]داده کاوی استخراج و تحلیل مقدار زیادی داده بمنظور کشف قوانین و الگوهای معنی دار در آنهاست. هدف اصلی داده کاوی، استخراج الگوهایی از داده ها، افزایش ارزش اصلی آنها و انتقال داده ها به صورت دانش است.
داده کاوی، بهمراه OLAP، گزارشگری تشکیلات اقتصادی (Enterprise reporting) و ETL، یک عضو کلیدی در خانواده محصول Business Intelligence، است.
حوزه های مختلفی وجود دارد که در آنها حجم بسیاری از داده در پایگاه داده های متمرکز یا توزیع شده ذخیره می شود. برخی از آنها به قرار زیر هستند:
پروژه Nutch، تلاشی برای ایجاد موتورهای جستجوی منبع باز و رایگان می باشد. این پروژه از Lucene به منظور جستجو و ابزار شاخص استفاده می کند. فتچر (روبات) از ابتدا برای این پروژه نوشته شد. پروژه Nutch
دارای معماری مدولار سطح بالایی می باشد که به طراحان این امکان را می دهد تا پلاگین هایی را برای فعالیت ها همانند تحلیل نوع رسانه، بازیابی اطلاعات، جستجو و خوشه بندی، ایجاد کنند.
داگ کاتینگ به عنوان یکی از توسعه دهندگان پیشگام در پروژه Nutch می باشد.
Lucene چیست؟
Lucene به عنوان یکی از نرم افزارهای منبع باز و شاخص رابط برنامه کاربردی (رابط برنامه کاربردی) می باشد که توسط موسسه آپاچی انتشار یافته است. Lucene به صورت جاوا نوشته شده و تحت لیسانس نرم افزاری موسسه آپاچی انتشار یافته است.
Lucene به عنوان هسته مرکزی موتور جستجو می باشد. به این ترتیب آن شامل مواردی همانند شبکه های عنکبوتی و برنامه های تجزیه کننده در ارتباط با فرمت های اسناد نمی باشد. در عوض چنین مواردی می بایست توسط افرادی اضافه گردد که از Lucene استفاده می کنند.
Lucene در ارتباط با منابع اطلاعاتی، فرمت خاص، و یا زبان خاصی نمی باشد و شما می توانید آن را به متن تبدیل کنید. این بدین معنی می باشد که شما می توانید از Lucene برای ایجاد شاخص و جستجوی اطلاعات ذخیره شده در فایل، صفحات وب بر روی سرورهای شبکه از راه دور و اسناد ذخیره شده در فایل های سیستمی محلی، فایل های متنی ساده، اسناد مایکروسافت، فایل های PDF یا HTML یا فرمت های دیگر، که شما می توانید اطلاعات متنی را از آن دریافت کنید، استفاده کنید.
Lucene در فرایند جریان انتقال به زبان های برنامه نویسی دیگر به غیر از جاوا قرار می گیرد.
1.3 پروانه کسب (لیسانس) چیست ؟
Lucene و Nutch به عنوان پروژه آپاچی بوده و تحت لیسانس آپاچی قرلر دارند.
2 طراحی Nutch
2.1 اجزای اصلی Nutch
موتور جستجوی Nutch شامل سه بخش می باشد:
1- کرالر، که به اکتشاف و بازیابی صفحات وب می پردازد.
2- WebDB، پایگاه اطلاعاتی به ذخیره URL پرداخته و محتوای صفحات را جمع آوری می کند.
3- برنامه لکسندر، که صفحات را از هم جدا کرده و بر اساس آن ها شاخص های بر مبنای کیبورد را می سازد.
توسعه پایدار، مفهوم جدیدی است که از طریق پیوند بین ابعاد مختلف توسعه (اقتصادی، فرهنگی، سیاسی و اجتماعی) و توجه خاص به ملاحظات محیطی و حفظ محیط زیست از دهه 80 به طور گسترده ای مطرح گردید. از سوی دیگر، مدیریت دولتی نوین به منظور افزایش مسئولیت مدیران به محیط پیرامونی خود، از دهه 70 جایگزین مدیریت دولتی در مفهوم سنتی آن شد. لذا در این مقاله، پس از تشریح «توسعه» در مفهوم سنتی، الگوی جدید آن تحت عنوان «توسعه پایدار» به عنوان اساس فعالیتهای مدیریت دولتی نوین مطرح شده است. سپس مدیریت دولتی نوین به عنوان محور توسعه پایدار و ابزار دولتها در کسب اهداف توسعه، پایدار، مورد بررسی و تحلیل قرار گرفته است.
همه ما مطالب زیادی راجع به مفهوم توسعه خوانده یا شنیده ایم و هر کسی از آن تجسمی در ذهن خود دارد. امروزه کمتر واژه ای تا این حد در محافل اجتماعی – سیاسی و خاصه مدیریت و اقتصاد مطرح شده است. بهرحال به قول ادبا باید گفت موضوع سهل و ممتنع است، سهل از آن جهت که مفاهیم و معانی کلی از آن در ذهن همه هست، ممتنع از آن روی که تعریف، جزئیات، مرزبندی و مهمتر از همه ساز و کارهای عملی تحقق توسعه همچنان مورد بحث است.
همه ما از توسعه اقتصادی شناخت داریم و شاخصه های آن را مثل رشد تولید، افزایش بهره وری (کارایی)، افزایش درآمد ملی و تولید ناخالص ملی و... در نظر داریم. از طرف دیگر، توسعه اجتماعی و شاخصه هایی نظیر توزیع عادلانه درآمد، برابری و بسط عدالت اجتماعی را نیز می شناسیم و گفته می شود که پس از رشد اقتصادی و حتی به همراه آن و به دنبال کارآفرینی، ایجاد اشتغال، به جا و لازم است تا افراد فعال جامعه در چرخه اقتصادی کشور مشغول به کار شوند. همچنین توسعه فرهنگی، از جنبه های نوین مفهوم توسعه است که شاخصه هایی مثل امکان استفاده متناسب و عادلانه همه از فضاهای فرهنگی، ارتقای دانش و معرفت در جامعه و... را در بر دارد. و همسنگ همه از توسعه سیاسی، مؤلفه هایی همچون مشارکت عمومی در تصمیم گیریها، فضای باز سیاسی، امکان مشارکت همگانی در قدرت صحبت می شود. افق های آینده مدیریت، توسعه انسانی، نقشها و وظایف دولت در زمینه توسعه و موضوع نظام اداری توسعه یا توسعه نظام اداری در این مقاله مورد بحث قرار خواهد گرفت.
توسعه، فرایندی تعاملی است که در آن افراد در شبکه های کاری یاد می گیرند که چگونه مشکلات را تعریف و حل کنند.
در مناطق خشک و نیمه خشک ایالات متحده امریکا، مناطق وسیع تر تحت تاثیر فرسایش باد قرار می گیرند. دشت های وسیع در شرق کوه های راکی، منطقه ای می باشد که به طور خاص تحت ناثیر حرکت بادها بوده که 20 درصد کل زمین های ایالات متحده را شامل می گردد. بسیاری از مناطق مرطوب نیز توسط فرسایش باد آسیب می بینند. مناطقی که تحت آسیب بیشتری قرار می گیرند شامل زمین های ماسه ای در امتداد نهرها، دریاچه ها و سرزمین های ساحلی و خاک های آلی می باشند.خاک های نباتی و گل و لای 10 میلیون هکتار از 34 ایالت امریکا را شکل می دهند.
فرسایش باد نه تنها باعث انتقال خاک می گردد، بلکه باعث خسارت به محصولات، خاکریزها، سازه ها و بزرگراه های می گردد. ذرات ریز خاک در میان زمین ها جابه جا شده و در نتیجه باعث کاهش بازده محصولات می گردد. رسوبات ته نشین شده برای بسیاری از مردم مشکل آفرین بوده و می توانند بر روی سلامتی افراد تاثیرگذار باشند. مواردی وجود دارد که این گرد و خاک فرسایشی باعث کاهش دید می گردد این شرایط منجر به تصادفات مرگ آوری می گردد. برای نمونه در سال 1991، 104 وسیله نقلیه در یک تصادف بین ایالتی به هم پرخورد داشته که نتیجه آن 15 مرگ و 150 زخمی بود. این ذرات می توانند بر روی اقیانوس ها نیز حرکت کنند.در نتیجه نشست خاک در واشنگتن دی سی ناشی از فرسایش باد در دشت های بزرگ در دهه 1930باعث شد ایالات متحده گفتگوهایی را در این زمینه شروع کند. شکل 20.1 خطر توزیع فرسایش بادی را در ایالت های غربی رودخانه می سی سی پی نشان می دهد.
موضوع مهم در ارتباط با فرسایش باد کیفیت هوا می باشد. سازمان حفاظت محیط زیست نشان داده است که مواد ریز در هوا برای سلامتی انسان مضر می باشد. این ذرات معلق هوایی برای افراد مسن، افرادی با بیماری های قلبی ریوی، و کودکان خطرناک می باشد. این ذرات در دو طبقه قرار می گیرند: ذرات درشت تر با 10 میکرون قطر و ذراتی کمتر از 2.5 میکرون می باشند. این ذرات از منابع مختلفی ایجاد می گردند. این ذرات ریز معمولا منشا آن از اتوموبیل ها و اگزوزها می باشند. ذرات ضخیم تر از جاده های غیر مسطح، تراش دادن ابزارها و فرایندهای کشاورزی حاصل می گردند. معمولا فعالیت های کشاورزی سهم کمی را در ارتباط با آلودگی هوا دارد. اما مناطقی وجود دارند که در دوره های خاصی از سال، این مورد را برعکس می کنند. گرد و خاک ناشی از فرسایش باد باعث پایین آمدن کیفیت هوا در بعضی از مناطق که دارای مشکلات کیفیتی هوا از منابع دیگر همانند وجود نواحی صنعتی در دریاچه بزرگ هستند، شده است.
خوردگی تشدیدی توسط جریان (FAC)یک خط لوله X65در یک آب اشباع از CO2توسط اندازه گیری های الکتروشیمیایی و شبیه سازی محاسباتی دینامیکی جریان (CFD)بر روی میکرو الکترود های نصب شده بر روی یک سیستم جت اصابتی بررسی شده است. مورفولوژی سطح الکترودها بعد از تست خوردگی توسط میکروسکوپ روبشی الکترونی مشخص شد. نتایج اثبات می کند، نقش جریان هیدرودینامیکی در FAC فولاد، به اثر آن بر روی خوردگی کربناتی پوسته تشکیل شده بر روی سطح الکترود بستگی دارد. افزایش سرعت جریان و تنش برشی رقیق کننده، کاهش دهنده یا حتی به صورت کامل پوسته را پاک می کند و خوردگی فولاد افزایش می یابد. برخورد اریب و مایل جریان عموماً افزایش نرخ خوردگی فولاد را نتیجه می دهد. تأثیر زاویه برخورد بر روی خوردگی فولاد به توزیع جریان سیال و تنش برشی بر روی سطح الکترود نسبت داده می شود. در برخورد نرمال یک سرعت جریان کم و تنش برشی و بنابراین نرخ انتقال جرم کم در منطقه مرکزی تولید خواهد شد. نتیجتاً پوسته خوردگی فشرده می تواند بر روی سطح الکترود برای حفاظت فولاد از خوردگی تشکیل شود. بیشترین نرخ خوردگی بر روی میکرو الکترودهایی که در نزدیکی مرکز هستند، با بیشترین سرعت جریان و تنش برشی مشاهده شده است. در زاویه برخورد مایل سرعت جریان سیال و تنش برشی و نرخ خوردگی میکرو الکترودها در مکان های دور از نازل نسبت به نزدیکی نازل بیشتر است. فعالیت خوردگی الکترود فولاد که در مرکز نگه دارنده فولاد قرار دارند عموماً با کاهش زاویه برخورد ناشی از افزایش اثر برش بر روی پوسته خوردگی افزایش می یابد.
فولاد، EIS، پلاریزاسیون، SEM، خوردگی اسیدی
تصدیق شده است که خوردگی CO2موجب شکست خط لوله ها و ترکیبات ساختاری در محصولات نفتی شده است و نتیجه آن ضرر اقتصادی و سوانح فاجعه بار همانند آلودگی های محیطی و منابع آبی خواهد شد. خوردگی CO2پیچیده است همراه با یک سری فاکتورهایی که بر فرایند خوردگی فولاد موثر هستند به ویژه جریان هیدرودینامیکی یک نقش با اهمیت تری سرتاسر یک ارتباط پیچیده اندازه حرکت هیدرودینامیکی و انتقال جرم به خوبی پارامترهای جریان که تعریف می کنند خصوصیات جریان عمومی با واکنش های خوردگی فولاد را بازی می کند. عموماً معتقدند که جریان سیال فرایند انتقال جرم را تسریع می کند و تشکیل پوسته خوردگی محافظ بر روی سطح فولاد را کاهش می دهد.