<?xml version="1.0"?>
<?xml-stylesheet type="text/css" href="http://wiki.parspooyesh.com/skins/common/feed.css?303"?>
<feed xmlns="http://www.w3.org/2005/Atom" xml:lang="fa">
		<id>http://wiki.parspooyesh.com/index.php?action=history&amp;feed=atom&amp;title=URLDump</id>
		<title>URLDump - تاریخچهٔ ویرایش‌ها</title>
		<link rel="self" type="application/atom+xml" href="http://wiki.parspooyesh.com/index.php?action=history&amp;feed=atom&amp;title=URLDump"/>
		<link rel="alternate" type="text/html" href="http://wiki.parspooyesh.com/index.php?title=URLDump&amp;action=history"/>
		<updated>2026-06-24T09:52:37Z</updated>
		<subtitle>تاریخچهٔ ویرایشهای صفحه در ویکی</subtitle>
		<generator>MediaWiki 1.19.0</generator>

	<entry>
		<id>http://wiki.parspooyesh.com/index.php?title=URLDump&amp;diff=186&amp;oldid=prev</id>
		<title>Support در ‏۶ سپتامبر ۲۰۱۱، ساعت ۰۸:۰۸</title>
		<link rel="alternate" type="text/html" href="http://wiki.parspooyesh.com/index.php?title=URLDump&amp;diff=186&amp;oldid=prev"/>
				<updated>2011-09-06T08:08:48Z</updated>
		
		<summary type="html">&lt;p&gt;&lt;/p&gt;
&lt;table class='diff diff-contentalign-right'&gt;
				&lt;col class='diff-marker' /&gt;
				&lt;col class='diff-content' /&gt;
				&lt;col class='diff-marker' /&gt;
				&lt;col class='diff-content' /&gt;
			&lt;tr valign='top'&gt;
			&lt;td colspan='2' style=&quot;background-color: white; color:black;&quot;&gt;→ نسخهٔ قدیمی‌تر&lt;/td&gt;
			&lt;td colspan='2' style=&quot;background-color: white; color:black;&quot;&gt;نسخهٔ ‏۶ سپتامبر ۲۰۱۱، ساعت ۰۸:۰۸&lt;/td&gt;
			&lt;/tr&gt;&lt;tr&gt;&lt;td colspan=&quot;2&quot; class=&quot;diff-lineno&quot;&gt;سطر ۱:&lt;/td&gt;
&lt;td colspan=&quot;2&quot; class=&quot;diff-lineno&quot;&gt;سطر ۱:&lt;/td&gt;&lt;/tr&gt;
&lt;tr&gt;&lt;td colspan=&quot;2&quot;&gt;&amp;#160;&lt;/td&gt;&lt;td class='diff-marker'&gt;+&lt;/td&gt;&lt;td style=&quot;background: #cfc; color:black; font-size: smaller;&quot;&gt;&lt;div&gt;&lt;ins style=&quot;color: red; font-weight: bold; text-decoration: none;&quot;&gt;[[Category:IBSng]]&lt;/ins&gt;&lt;/div&gt;&lt;/td&gt;&lt;/tr&gt;
&lt;tr&gt;&lt;td class='diff-marker'&gt;&amp;#160;&lt;/td&gt;&lt;td style=&quot;background: #eee; color:black; font-size: smaller;&quot;&gt;&lt;div&gt;__TOC__&lt;/div&gt;&lt;/td&gt;&lt;td class='diff-marker'&gt;&amp;#160;&lt;/td&gt;&lt;td style=&quot;background: #eee; color:black; font-size: smaller;&quot;&gt;&lt;div&gt;__TOC__&lt;/div&gt;&lt;/td&gt;&lt;/tr&gt;
&lt;tr&gt;&lt;td class='diff-marker'&gt;&amp;#160;&lt;/td&gt;&lt;td style=&quot;background: #eee; color:black; font-size: smaller;&quot;&gt;&lt;div&gt;&amp;lt;div dir=rtl lang=fa&amp;gt;&lt;/div&gt;&lt;/td&gt;&lt;td class='diff-marker'&gt;&amp;#160;&lt;/td&gt;&lt;td style=&quot;background: #eee; color:black; font-size: smaller;&quot;&gt;&lt;div&gt;&amp;lt;div dir=rtl lang=fa&amp;gt;&lt;/div&gt;&lt;/td&gt;&lt;/tr&gt;
&lt;/table&gt;</summary>
		<author><name>Support</name></author>	</entry>

	<entry>
		<id>http://wiki.parspooyesh.com/index.php?title=URLDump&amp;diff=185&amp;oldid=prev</id>
		<title>Support: صفحه‌ای جدید حاوی '__TOC__ &lt;div dir=rtl lang=fa&gt; &lt;font face =&quot;Tahoma&quot;&gt; == معرفی == ''Urldump'' ابزاری است برای مشاهده و ثبت درخوا...' ایجاد کرد</title>
		<link rel="alternate" type="text/html" href="http://wiki.parspooyesh.com/index.php?title=URLDump&amp;diff=185&amp;oldid=prev"/>
				<updated>2011-09-06T08:08:17Z</updated>
		
		<summary type="html">&lt;p&gt;صفحه‌ای جدید حاوی &amp;#039;__TOC__ &amp;lt;div dir=rtl lang=fa&amp;gt; &amp;lt;font face =&amp;quot;Tahoma&amp;quot;&amp;gt; == معرفی == &amp;#039;&amp;#039;Urldump&amp;#039;&amp;#039; ابزاری است برای مشاهده و ثبت درخوا...&amp;#039; ایجاد کرد&lt;/p&gt;
&lt;p&gt;&lt;b&gt;صفحهٔ جدید&lt;/b&gt;&lt;/p&gt;&lt;div&gt;__TOC__&lt;br /&gt;
&amp;lt;div dir=rtl lang=fa&amp;gt;&lt;br /&gt;
&amp;lt;font face =&amp;quot;Tahoma&amp;quot;&amp;gt;&lt;br /&gt;
== معرفی ==&lt;br /&gt;
''Urldump'' ابزاری است برای مشاهده و ثبت درخواست‌های HTTP کاربران متصل به شبکه.&amp;lt;br&amp;gt;&lt;br /&gt;
برنامه urldump برروی بستر Linux نصب می‌شود و بر اساس تنظیمات خود ترافیک عبوری را به دنبال درخواست‌های web جستجو می‌کند و&amp;lt;br&amp;gt;&lt;br /&gt;
چنانچه درخواستی مشاهده شود به همراه IP مبدا و مقصد در دیتابیس ثبت می‌شود.&amp;lt;br&amp;gt;&amp;lt;br&amp;gt;&lt;br /&gt;
&lt;br /&gt;
مکانیزم ثبت کننده در urldump این قابلیت را دارد تا نام‌کاربری درخواست کننده را نیز ثبت کند. برای این کار urldump از اطلاعاتی&amp;lt;br&amp;gt;&lt;br /&gt;
که در جدولی به نام ip_map ذخیره شده استفاده می‌کند. این جدول می‌تواند به ۲ صورت وجود داشته باشد یا در دیتابیس urldump یا در یک&amp;lt;br&amp;gt;&lt;br /&gt;
دیتابیس خارجی.&amp;lt;br&amp;gt;&lt;br /&gt;
ip_map برای نگهداری نام کاربری و IP اختصاص داده شده به هر کاربر استفاده می‌شود.&amp;lt;br&amp;gt;&lt;br /&gt;
در صورتی که IP مبدا درخواست در این جدول یافت شود مکانیزم ثبت کننده از آن استفاده خواهد کرد و نام کاربری درخواست‌کننده هم به همراه&amp;lt;br&amp;gt;&lt;br /&gt;
بقیه اطلاعات ثبت خواهد شد.این جدول همیشه توسط برنامه‌ها یا سرویس‌های خارجی کنترل می‌شود و urldump نقشی در نگهداری نام کاربری و IP ندارد.&amp;lt;br&amp;gt;&lt;br /&gt;
به عنوان مثال برنامه IBSng جدول ip_map را درون دیتابیس خود نگهداری می‌کند و urldump می‌تواند با اتصال به آن از اطلاعات استفاده کند.&amp;lt;br&amp;gt;&amp;lt;br&amp;gt;&lt;br /&gt;
&lt;br /&gt;
شکل کلی استقرار Urldump در شبکه را در شکل زیر مشاهده می‌کنید.&lt;br /&gt;
[[Image:Urldump.png|center]]&lt;br /&gt;
&lt;br /&gt;
همانطور که مشاهده می‌شود در این شکل urldump درست در مسیر عبوری ترافیک قرار گرفته. چنانچه مدیر شبکه مایل باشد می‌تواند با استفاده از &amp;lt;br&amp;gt;&lt;br /&gt;
Port Mirroring ترافیک عبوری را به سمت سیستمی که urldump روی آن نصب شده ارسال کند و به این صورت آن را از مسیر عبور ترافیک خارج کند. &amp;lt;br&amp;gt;&lt;br /&gt;
&lt;br /&gt;
=== عملکرد برنامه ===&lt;br /&gt;
پس از اجرا برنامه بلافاصله با توجه به تنظیمات خود و با استفاده از کتابخانه libpcap به کارت شبکه مورد نظر متصل می‌شود.&amp;lt;br/&amp;gt;&lt;br /&gt;
از این لحظه به بعد برای هر درخواست وب از طرف کاربر این مراحل انجام می‌شود:&lt;br /&gt;
*ترافیک مورد نظر توسط libpcap در اختیار urldump قرار می‌گیرد&lt;br /&gt;
*برنامه URLDump ترافیک را آنالیز کرده و اطلاعات مورد نیاز را استخراج می‌کند.&lt;br /&gt;
* IP مبدا و مقصد و آدرس درخواست شده روی وب چک شده و در دیتابیس ذخیره می‌شود.&lt;br /&gt;
*در حین ذخیره سازی با توجه به تنظیمات نام کاربری با استفاده از IP مبدا جستجو شده و به همراه بقیه اطلاعات ذخیره می‌شود.&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
== استفاده از برنامه ==&lt;br /&gt;
=== شرایط کارکرد ===&lt;br /&gt;
====دسترسی به ترافیک عبوری====&lt;br /&gt;
از آنجا که برنامه urldump به طور کلی فقط برای آنالیز کردن ترافیک مورد استفاده قرار می‌گیرد می‌توان آن را در اشکال مختلف به کار گرفت:&amp;lt;br/&amp;gt;&lt;br /&gt;
*مستقیم: در این حالت ترافیک از سیستمی که برنامه روی آن نصب شده عبور می‌کند مثلا Bridge.&lt;br /&gt;
*غیر مستقیم: در این حالت سیستمی که برنامه URLDump روی آن نصب شده به طور مستقیم در مسیر ترافیک نیست بلکه ترافیک با استفاده از ابزار‌های دیگر مانند Port Mirroring به سمت آن ارسال می‌شوند.&lt;br /&gt;
&lt;br /&gt;
==== حجم ترافیک ====&lt;br /&gt;
به طور تقریبی به ازای هر Mega Byte پهنای باند دستکم ۷۰۰۰ درخواست در یک ساعت ثبت می‌شودبنابراین تمهیدات لازم برای فضای مورد نیاز جهت ذخیره اطلاعات باید&amp;lt;br/&amp;gt;&lt;br /&gt;
از قبل دیده شوند.&lt;br /&gt;
&lt;br /&gt;
=== گزارش‌گیری ===&lt;br /&gt;
گزارش‌گیری از اطلاعات ثبت شده هم به صورت Realtime و هم Offline از طریق رابط کاربری IBSng امکان پذیر است.&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
برای گزارش گیری از ۳ زیرمنو،در قسمت Report Web analyzer می توانید استفاده نمایید، که هر یک به صورت زیر عمل می نماید :&lt;br /&gt;
&lt;br /&gt;
:*'''1- Top Visited URLs :ليست سايتهائی که بيشترين بازديدکننده را داشته اند.'''&lt;br /&gt;
&lt;br /&gt;
دراین قسمت از IBSng می توانید لیست سایتهائی که بیشترین بازدید کننده را داشته اند را مشاهده کنید. &lt;br /&gt;
&lt;br /&gt;
[[Image:IBSng_UserManual_RWebTop.JPG]]&lt;br /&gt;
&lt;br /&gt;
در صورت نیاز، پس از تعیین شرایط دلخواه بر روی OK کلیک کنید.&lt;br /&gt;
&lt;br /&gt;
[[Image:top visited conditions.png]]&lt;br /&gt;
&lt;br /&gt;
در صورتی که با شرایط تعیین شده اطلاعاتی یافت شود، لیست آنرا در جدول زیر مشاهده خواهید کرد:&lt;br /&gt;
&lt;br /&gt;
[[Image:IBSng_UserManual_RWebTop1.JPG]]&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
:* '''2- RealTime Web Analyzer :گزارش سايت های در حال بازديد کاربران'''&lt;br /&gt;
&lt;br /&gt;
دراین قسمت از IBSng می توانید گزارش سایتهای در حال بازدید کاربران رامشاهده کنید.برای مشاهده این گزارش ، از قسمت Report، برروی لینک RealTime Web Analyzer کلیک کنید. اطلاعات نشان داده شده در این قسمت همانند قسمت قبل می باشد. &lt;br /&gt;
&lt;br /&gt;
[[Image:realtime webanalyzer log.png]]&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
:*'''3- Web Analyzer Logs :گزارش سايت های بازديد شده توسط کاربر.'''&lt;br /&gt;
&lt;br /&gt;
دراین قسمت از IBSng می توانید گزارش سایتهای بازدید شده کاربران رامشاهده کنید. برای مشاهده این گزارش ، از قسمت Report، برروی لینک Web Analyszer Logs کلیک کنید.در ابتدا می توانید گزارش تغییرات مشخصات کاربر را بر اساس شرایط خاصی که در شکل زیر نشان داده شده است ، فیلتر کنید.&lt;br /&gt;
&lt;br /&gt;
[[Image:Web analyzer logs.png]]&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
پس از تعیین شرایط دلخواه بر روی OK کلیک کنید. در صورتی که با شرایط تعیین شده اطلاعاتی یافت شود، لیست آنرا در جدول زیر مشاهده خواهید کرد: &lt;br /&gt;
&lt;br /&gt;
[[Image:web analyzer list1.png]]&lt;br /&gt;
&lt;br /&gt;
== نیازمندیها ==&lt;br /&gt;
برنامه Urldump برای اجرا شدن به این پکیج‌ها احتیاج دارد:&lt;br /&gt;
&amp;lt;div dir=ltr lang=en&amp;gt;&lt;br /&gt;
 - libc &amp;gt;= 2.7 (معمولا نسب است)&lt;br /&gt;
 - libpq &amp;gt;= 8.3&lt;br /&gt;
 - libpcap &amp;gt;= 0.9.8&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== نصب از طریق پکیج ==&lt;br /&gt;
&amp;lt;div dir=ltr&amp;gt;&lt;br /&gt;
 #dpkg -i urldump.deb&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
فایل configuration در مسیر زیر کپی خواهد شد.&lt;br /&gt;
&amp;lt;div dir=ltr&amp;gt;&lt;br /&gt;
 # /etc/urldump/urldump.conf&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== راه اندازی دیتابیس ==&lt;br /&gt;
فایل‌های مربوط به دیتابیس در صورتی که از پکیج استفاده می‌کنید در مسیر زیر کپی شده‌اند. &lt;br /&gt;
&amp;lt;div dir=ltr&amp;gt;&lt;br /&gt;
 # /usr/share/urldump/db/tables.sql&lt;br /&gt;
 # /usr/share/urldump/db/functions.sql&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
به این صورت می‌توانید دیتابیس را بسازید:&lt;br /&gt;
&amp;lt;div dir=ltr lang=en&amp;gt;&lt;br /&gt;
 # su - postgres&lt;br /&gt;
 $ createuser -s -P urldump&lt;br /&gt;
 $ createdb urldump;createlang plpgsql urldump&lt;br /&gt;
 $ exit&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
فایل dblink.sql را پیدا کنید. توجه کنید که پکیج postgres-contrib باید نسب شده باشد.&lt;br /&gt;
&amp;lt;div dir=ltr&amp;gt;&lt;br /&gt;
 ~#locate dblink.sql&lt;br /&gt;
  /usr/share/postgresql/8.3/contrib/dblink.sql    &amp;lt;------ فایل مورد نظر&lt;br /&gt;
  /usr/share/postgresql/8.3/contrib/uninstall_dblink.sql&lt;br /&gt;
&lt;br /&gt;
 # psql -U urldump urldump &amp;lt; /usr/share/postgresql/8.3/contrib/dblink.sql&lt;br /&gt;
 # psql -U urldump urldump &amp;lt; /usr/share/urldump/db/tables.sql&lt;br /&gt;
 # psql -U urldump urldump &amp;lt; /usr/share/urldump/db/functions.sql&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== تنظیمات ==&lt;br /&gt;
&amp;lt;div dir=ltr&amp;gt;&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
مشخص کردن کارت شبکه:&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 ifname : is name the ethernet in which traffic is flowing (eth0)&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
الگو پیدا کردن ترافیک:&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 pattern : pcap filter pattern to find desired packet. any pattern which works with tcpdump can be used.&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
زمان تاخیر برای جمع‌آوری اطلاعات و ارسال به دیتابیس:&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 caching_time : delay between capturing data and storing in database&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
آدرس سیستمی که دیتابیس URLDump روی آن قرار گرفته:&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 urldump_db_host : ip address of the server which hosts the urldump database&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
نام دیتابیس URLDump :&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 urldump_db_name : name of urldump database (urldump)&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
نام کاربری و رمز عبور برای ارتباط با دیتابیس URLDump :&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 urldump_db_username : username to connect to urldump database&lt;br /&gt;
 urldump_db_password : password for user&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
محل ذخیره IP برای کاربران online. اگر این اطلاعات در همان دیتابیس URLDump ذخیره می‌شود به NONE ست شود.&amp;lt;BR&amp;gt;&lt;br /&gt;
چنانچه در دیتابیس دیگری دخیره می‌شود مانند IBSng آدرس IP آن دیتابیش وارد شود.&amp;lt;br&amp;gt;&lt;br /&gt;
'''در حالت دوم اگر دیتابیس URLDump و IBSng روی یک سیستم و کنار هم قرار داشته باشند مقدار خالی ست شود.'''&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 ipmap_db_host : ip address of the database which ip_map table exists (ibsng db server)&lt;br /&gt;
&amp;lt;div dir=&amp;quot;rtl&amp;quot;&amp;gt;&lt;br /&gt;
نام کاربری و رمز عبور برای ارتباط با دیتابیسی که اطلاعات کاربران Online را ذخیره کرده.&amp;lt;br&amp;gt;&lt;br /&gt;
در قسمت قبل مقدار NONE ست شده نیازی به مشخص این موارد نیست.&amp;lt;br&amp;gt;&lt;br /&gt;
اما اگر دیتابیس دیگری مشخص شده باشد این اطلاعات با توجه به آن دیتابیس مشخص شوند.&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
 ipmap_db_username : username to connect to database in which ip_map table exists&lt;br /&gt;
 ipmap_db_password : password for above user&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;br /&gt;
&lt;br /&gt;
&amp;lt;/font&amp;gt;&lt;br /&gt;
&amp;lt;/div&amp;gt;&lt;/div&gt;</summary>
		<author><name>Support</name></author>	</entry>

	</feed>