-->

Robots.txt adalah suatu file yang di berguna untuk memudahkan suatu search engine mengindex halaman web kita.
Jika search engine crawler datang di web kita, maka dia akan mencari file robots.txt dan memberitahukan search engine spider bahwa halaman web tersebut harus di index atau di abaikan.
Berikut beberapa kesalahan mengapa robot search engine menjauh di web kita :

1. Robots.txt rusak atau berisi parameter yang salah salah
Jika robot google salah membaca isi robots.txt anda, maka google akan mengabaikan halaman web anda.
Anda bisa mempelajari tata cara penulisan robots di http://www.robotstxt.org/
Robots.txt adalah suatu file yang di berguna untuk memudahkan suatu search engine mengindex halaman web kita.
Jika search engine crawler datang di web kita, maka dia akan mencari file robots.txt dan memberitahukan search engine spider bahwa halaman web tersebut harus di index atau di abaikan.
Berikut beberapa kesalahan mengapa robot search engine menjauh di web kita :
1. Robots.txt rusak atau berisi parameter yang salah salah
Jika robot google salah membaca isi robots.txt anda, maka google akan mengabaikan halaman web anda.
Anda bisa mempelajari tata cara penulisan robots di http://www.robotstxt.org/
2. Halaman web anda mempunyai code terlalu panjang
Jika halaman web anda berisikan code javascript, CSS, Html dan lainnya yang terlalu banyak dan panjang, maka akan membuat web anda susah di akses ( lambat aksesnya).
Jika itu terjadi maka robot search engine akan kesulitan untuk mengurai isi web anda.
3. Navigasi menu web anda mempunyai masalah
Jika anda membuat menu yang menggunakan javascript,DHTML atau AJAX, maka menu tersebut tidak bisa di index oleh robot search engine.
karena robot search engine hanya bisa mengindex link yang menggunakan HTML.
4. URL website anda terlalu banyak variable
Jika url anda terlalu banyak variable, maka google juga akan mengabaikan halaman web anda.
Contoh URL yang terlalu banyak variable :
http://domain.com/page.php?page=1&id=2&mirror=3&direct=index.html
Pernyataan resmi dari search engine google :
“Google indexes dynamically generated webpages, including .asp pages, .php pages, and pages with question marks in their URLs. However, these pages can cause problems for our crawler and may be ignored.”
5. Menggunakan session ID di web anda
Search engine google tidak mau mengindex suatu URL yang berisikan session ID karena menyebabkan duplicate content.
Penggunaan cookies lebih baik dari pada menggunakan session ID

2. Halaman web anda mempunyai code terlalu panjang
Jika halaman web anda berisikan code javascript, CSS, Html dan lainnya yang terlalu banyak dan panjang, maka akan membuat web anda susah di akses ( lambat aksesnya).
Jika itu terjadi maka robot search engine akan kesulitan untuk mengurai isi web anda.

3. Navigasi menu web anda mempunyai masalah
Jika anda membuat menu yang menggunakan javascript,DHTML atau AJAX, maka menu tersebut tidak bisa di index oleh robot search engine.
karena robot search engine hanya bisa mengindex link yang menggunakan HTML.

4. URL website anda terlalu banyak variable
Jika url anda terlalu banyak variable, maka google juga akan mengabaikan halaman web anda.
Contoh URL yang terlalu banyak variable :
http://domain.com/page.php?page=1&id=2&mirror=3&direct=index.html
Pernyataan resmi dari search engine google :
“Google indexes dynamically generated webpages, including .asp pages, .php pages, and pages with question marks in their URLs. However, these pages can cause problems for our crawler and may be ignored.”

5. Menggunakan session ID di web anda
Search engine google tidak mau mengindex suatu URL yang berisikan session ID karena menyebabkan duplicate content.
Penggunaan cookies lebih baik dari pada menggunakan session ID

2 komentar:

  1. I am really inspired along with your writing talents as neatly as with the layout in your blog.
    Is this a paid theme or did you customize it yourself?
    Anyway keep up the excellent high quality writing, it is uncommon to see a nice blog like this one these
    days..

    Review my weblog :: onlineradio

    BalasHapus
  2. Tag Cloud. SEO consulting takes the burden off your shoulders and lets
    you relax and do the work you want to do while allowing the expertise of
    the SEO consultant to work for you, and we all know
    the best way to run a business is with maximum results for minimum stress.
    It would be optimum thought to select the local SEO service after checking the rank of their website.
    While you’re at it, remove all or fix 404 errors. NOW,
    I don't mean you should just put keyword spam in your footer. There are so many good blogs out there, and if you're
    one of those writers, you definitely know how important it is
    that your site gets heard through all of the noise. Since keyword
    analysis is needed for both SEO (search engine optimization) and SEM,
    we often confuse using these terms. Content writing for websites is not as simple as
    typing out a predetermined amount of words, if you wish people
    to view the content. Google bowling messes up the external ranking used by Google and penalizes a
    sites ranking compared it the competitors. ) of links.

    They want to know things about how to create effective copy, general marketing tips and maybe even stuff about
    social media. The concepts make use of the current social networking sites,
    which are very popular among the online audience. Basically, if you create links to your website with
    "ink cartridges" or "printer cartridges" in the anchor
    text, it will help move your website up on the
    search results for those key words. No - you name some of
    your images "breast. Know how to get better rank. The sooner a site is presented in the search result, or the higher it “ranks”, the more searchers will visit the site. You need to try to find reputed SEO consultants. When a person enters a keyword into the search box of a particular search engine such as Google, there will be scores of results showing out which are a result of a search engine algorithm devised by that particular search engine. The content must complement the theme of the website design. Image Optimization is also a part of SEO services in Pune.

    my web blog ... click through the following website
    My web site > wiki.flash-template-design.com/index.php5?title=User:BMBBriget

    BalasHapus