Cara Mengatasi URL Dicekal Robots.txt

mkaci gan pencerahannya, tapi aku pernah mraktekin seperti itu, bukannya berkurang malah bertambah yg di cekal sekarang aja ada 104...padahal robot.txt nya aku non aktifkan, tolong bantu gan pencerahan kembali barang kali saya yg keliru.., mkc

saya lebih banyak lagi gan di http://dietdanbugar.blogspot.com ada 514 URL dicekal, hiks hiks kudu gimana ini ?

thanks gan ijin coba dulu

aduh bos, ane teh bingung banget euy. masalahnya blog ane ada dua kemungkinan penyebab trafik blog ane turun. pertama saya baru aja ganti domain, kedua saya ganti template dan ketiga blog ane dicekal oleh robot. gitu. gimana dong solusinya? bantuin ane dongg..

Mas, saya mau tanya, dari beberapa artikel yang pernah saya baca ada pendapat yang menyatakan bahwa perintah Disallow: /search ini untuk melarang robot search engine untuk meng-crawl directory label, dengan alasan karena memang directory label tidak perlu diindex sebab label tidak menunjukkan halaman riil/sebenarnya.
menurut tanggapan/pendapat mas bagaimana ?

Thanks gan,Ane mempunyai beberapa url yang dicekal,sangat membantu. salam kenal gan. Silahkan main ke blog ane buat saran dari agan : klik-code.blogspot.com

mantap, ini dia yang saya cari
oy mas kunjungan baliknya ya http://catatancalvinnainggolan.blogspot.com/

makasih pencerahannya gan, sekarang sudah sembuh blog ane, jika berkenan monggo mampir dimari gan http://sabukboncengapro.com

wahh terimakasih banyak mas.. akirnya site saya bisa diindex google lagi..

ooohh. ternyata itu yng bikin 21 url ane tercekal.. terimakasih pencerahanyaa....

Mantap informasinya.. Tengkyu master..

thax jg knjunganx...

Terima Kasih gan,, sangat membantu sekali.
mampir yah di http://www.joisetrick.us/

cara ini tidak berfungsi sama skali,,, gw dah coba dan dah hampir setengah tahun ditunggu ttp aja url gw dicekal???

search di webmaster mah gk bs di save gan. rata-rata giini smua artikel'a suruh ngapus" bgituan. ksh tutorial yang jelas donk gan!!!

mas ku udah pasang tapi bukannya berkurang,tapi kok malah nambah ya URL yang di cekal

thanks infonya, saya coba dulu gan. mudah-mudahan berhasil.

semoga berhasil :) nice info

kunjungi blog loker gresik 2013 "lokergresik.blogspot.com"

@novia firmansyahok gan

@novia firmansyahok gan

sip gan,saya sudah praktekin cara ini mudah mudahan berhasil.terima kasih informasi nya sangat membantu nih

Gan untuk setelan Tag tajuk robot khusus itu yg benar bagaimana?
- apakah dinonaktifkan atau di aktifkan?
- jika di aktifkan struktur setelan yang benar bagaimana ?

Komentar ini telah dihapus oleh pengarang.

nyimak aja dulu

Mas bro, udah saya setting seperti itu, tapi masih ada 1 url lg yg kena cekal,

masih ada solusi tidak

izin coba dan copas ya gan, jangan lupa kunjungan baliknya :D

Bos,sy sdh cb cr di atas tp kok yg dicekal malah nambah...

mas gan blog ane 1000 lebih yang dicekal,,
beneran cuman gitu caranya? terus kalo saya ikutin caranya, tidak akan mengurangi pengunjung blog saya kan?

Blog ini jg prnah mngalami yg agan alami, dengan cara d atas, alhmdllah skrng sudah 0. Agan cek sndiri jmlah pngunjung blog ini.! Bagi saya Ñε̲̣̣̣̥ε̲̣̣̣ε̲̣̣ε̲̣ aman gan.! Thax knjunganx..!

Artinya :/ search itu apa brader? trus ada bukti gak atas saran yng dibuat diatas?

Makasih mas bro, dah tau obatnya nih... butuh berapa lama untuk memperbaiki url yg dicekal?

Mantap gan URL yang dicekal cukup banyak jg neh mencapai 158, thank

punya saya malah 50 yang di cekal hedewh baru tau setelah obok2 google webmaster
ini blog nya indonesiaoriginalrecipes.blogspot.com

sob, saya coba ya. blog saya banyak banget yang dicekal. dengan tips ini saya harap berhasil. sekali lagi makasih ya

saya baru buat, sudah 8 yang dicekal sob. saya coba tips dari agan ini. smg berhasil terimakasih

Salam kenal Mas Farid , boleh tanya nih apa pengaruhnya atau malah tidak bagus jika saya pasang juga User-agent: googlebot
Disallow: /search ?
sharenya KEREN mas Farid ....terima kasih

blog saya mendem ada email datang dari google pemberitahuan blog dicek di webmaster 300 yng dicekal, udah ampir 2 minggu pengunjung paling 250 yng biasanya rata2 1000

Terima kasih atas solusinya gan
ane sempat Bingung karna hampir separuh dari semua url blog ane dicekal.
semoga berhasil.

Apa ada cara lain? sudah saya praktekkan ternyata cara ini tidak efektif www.s7eep.com

thnks gan
http://masteranang.blogspot.com/

oke bos terimakasih saya akan coba praktekan

lansung sedot dan praktek nih sob
terima kasih banget
:)
salam blogger

tak coba dulu

trims infonya
blog saya 41 dicekal robot
ternyata itu masalahnya
saya coba dulu

blog saya hanya 22 yang dicekal apa maksudnya dicekal ya? apakah blog anda kembali mendapatkan visitor 1000 setelah melakukan hal ini?

sama gan ane blog baru langsung kena robot penyebabnya apaa ya gan ?

Assalmualaikum,
mungkin sy bs dapat solusi disini, blog saya url yang dicekal ada 91an url semuanya kesalahan 404 d webmaster.
saya sudah coba caranya mas farid, tapi robot.txt nya tidak bisa di ubah seperti tidak bisa tersimpan, tetap balik lagi seperti robot.txt saya seperti semula,
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

mohon d bantu solusinya mas farid, terimakasih, wassalam

gan,mau tanya,setelah memasang kode yang kedua yang telah dirubah tadi ke blog,dan sudah aktif,setelah itu aku buka webmaster url yang di cekal kog masih ada tulisannya yang /search

kog di blog ane semakin bertambah ya gan, awalnya hanya 35 tapi kini menjadi 54, padahal sudah mengikuti panduan diatas

ni blognya gan

akhirnya nemu solusi disini. Trims.

Saya sedang mencari artikel sejenis ini. ternyata blog anda langsung muncul. terima kasih.

Oh begini toh caranya....Thank you..

punyaku 21 sob pantesan artikel ane ada yg g ada digoogle ternyata dicekal , thanks infonya sob mampir ya keblog sederhanaku :)
alfianCMX

Penjelasan yang jelas dan gamblang... Makasih gan...

url sy yg dicekal 74 gan ..:(

Ijin praktek mas ;)

omashare.blogspot.com

Makasih atas ilmunya.

Komentar ini telah dihapus oleh administrator blog.

Informasi yang sangat bermanfaat gan.
Terima kasih ya, semoga sukses selalu. :)

Jangan lupa comeback: http://catatan-lingga.blogspot.com/

saya mencari di google mengenai "URL yang Dicekal" ternyata situs ini yang tampil dihalaman pertama, salam hormat..., gan saya punya situs masih bingung untuk penghapusan yang posting yang telah saya hapus tetapi google masih terus mengindex nya terus. mohon bantuannya agan agan yang terhormat email ke saya yah... pujianto@tabungpemadamapi.com ini situs yang saya lagi bangun http://www.alat-pemadamapi.co.id

salam hormat informasi ini apakah sudah terbukti karna saya pernah baca di kitab kitab kalau salah gunakan robotex bisa situs kita tidak di indek mbah google.... mohon pencerahannya. samam
tabung pemadam api
tabung pemadam api
tabung pemadam api murah
alat pemadam api
alat pemadam
alat pemadam api info
alat pemadam api murah
isi ulang alat pemadam api
alat tabung pemadam api murah
pemadam api murah

Baru cek, ternyata ada 450an lebih yang dicekal,
pantes banyak penurunan traffic,
Thanks Informasinya mas.....
dicoba dulu TKP

128 url dicekal sm pak polisi alat webmaster. ijin nyoba cara agan ya Gan. semoga bisa ngeluarin url sy dari jeruji pencekalan pak pol webmaster. heheheh

Saya tagi lagi ngecek Google Webmaster tool, pas masuk menu Crawl > Blocked URLs, ternyata ada 20 url yang dicekal. Saya langsung search di mbah google nyari solusi cara mengatasi hal tersebut, akhirnya ketemu solusinya disini. lalu langsung dipraktekn, tinggal nunggu perubahannya beberapa hari kedepan. Sebelumnya terima kasih banyak gan, sangat bermanfaat... :)

Jika berkenan, mari mampir ya => http://penatekno.blogspot.com/

punya saya ada hampir 223 URL yg dicekal oleh Google mas.
oh ya, emangnya caranya semudah gitu aja ya mas. cuma dihilangkan aja ya mas.
em.., saya coba aja ya mas.
semoga bisa hilang.

oh ya. Izin bookmark blog ini ya. bagus sepertinya isinya bermanfaat

masih bingung boz,ternyata sulit bagi pemula seperti sy, sy sering gunta ganti templat dan meta deskripsion itu gimana boz, tp url yg di cekal masih 4

Makasih gan, sangat bermanfaat.

Terima Kasih Banyak Mas Bro, Ternyata ada 100 an yang di cekal. Mantab Infonya

kok masih ngak ada perubahan pada hal udah 1 bulan??!!

gan itu kan khusu blog ya.., tapi kallau untuk wordpres gimana ya soalnya robots.txt kok beda ya gimana

Gan tapi bisa gak untuk mengintegrasikn robot.txt untuk menghapus url yang not found? Kalo bisa gmna caranya gan?

Bagus sekali mas tutorialnya..thanks

makasi banyak kawan, sangat membantu saya,
http://gunknablog.blogspot.com

langsung tak praktekin gan blog ku malah parah yg dicekal..hhahah

iya nih sudah persi sama koq masih bayak juga ya... yang dicekal robots txt... mohon tips dan tricknya yang tockcer
salam kenal by: omar kwox bekerja di PNPM Mandiri Perkotoan sebagai pdkp specialist menyukai blogging dan puisi,sajak,olah raga

maaf agan-agan, saya masih sangat awam sekali masalah blog, ilmu pun saya dapat dikit2 dari blog ke blog, saya pernah baca, robot google sangat jauh lebih pintar dari kita, dia tau content kita yang kopas, yang double content dan lain sebagainya. Oleh karena itu menurut saya, mengutak atik robot malah anda kena batunya, robot cuma mesin yang kadang-kadang tak mengenal majikannya. Apa yang diperintahkan itu yang dikerjakan, bukankah kita-kita ini tidak sepenuhnya mengenal perintah untuk robot si google itu. Lebih baik menurut saya cari saja penyebab dicekalnya url anda, contohnya perbaiki konten yang sifatnya double, hindari kopas dengan cara masuk ke situs http://copyscape.com dan masukkan url anda, jika banyak yang sama dengan blog orang, sisip saja kata per kata di tengah2 kalimat. Jika judul anda double content juga buatlah judul baru dengan cara mengedit lalu buatkan menjadi draf dulu, lalu posting kembali dengan judul yang berbeda. Mungkin itu menjadi solusi yang logis, tunggu seminggu dua minggu Insya Allah sembuh.
Google menginginkan kita bermain secara jujur, karena mengelola blog bukanlah pekerjaan ringan, tidak semua copas. Mungkin itu yang bisa saya uraikan, tentu ini tidak bermaksud menggurui agan-agan, saya mohon maaf jika ini salah, saya hanya berpikir yang sedikit lebih masuk akal dari pada memperdaya robot yang jauh lebih mengerti tata kelola miliknya dari pada kita. Maaf sekali lagi agan-agan kalau pendapat saya salah, kalau agan-agan tidak dendam dengan argumen saya yang kontra ini mari saya undang untuk menjenguk saya di gubuk kecil http://komposisiproduk.blogspot.com

Izin langsung amalkan bos

Terima kasih infonya gan. Sekarang blog saya sudah tak dicekal lagi :)
Kunjungi blog saya ya gan http://typepedia.blogspot.com/2014/11/20-teknik-seo-terbaru-untuk-blog.html

owwh pantesan saja banyak turorial yg mencantumkan disallow /search pada postnya saya kena jebakan neh, untuk dikasih tahu agan admin ini. thanks gan.

Makasih.....and saya coba dulu..biar dapat manfaatnya ... heee

memang bisa langsung ya gan ? |


http://ericknetizen.blogspot.com/2014/11/kamera-thermal-pendeteksi-hantu.html

makasih infonya mas

makasih agan,, memang banyak blog yang sering eror akibat url yang tidak di perbolehkan.

wah makasih infonya gan :D thanks

Oke sob makasih tutorialnya sob, saya 21 yang dicekal, pantes akhir akhir ini jadi menurun, izin coba ya. Kunjung balik ya Drio AC, Dokter Android blog

Makasih.....and saya coba dulu..biar dapat manfaatnya ... heee

wah gan itu sangat membbantu bagi saya yang newbie di blog..
makasih gan atas info nya..

punya sada ada search pantas saja artikel saya tiap hari yang di cekal naik terus,,,, ijin coba ya mas bro

salam kenal arek bondowoso

mantab banget sob, terimakasih buat tutorialnya... sangat membantu

makasih gan.. kunjungan baliknya ya gan afandi-corner.blogspot.com

mksudnya ini apa ya saya belum paham

Kalau pada yg website tipe wodpress bagaimana mengatasi URL yg dicekal gan? coz yg saya ada sekitar 240 url yg dicekal

Pakai Cara ini : Meta tag ini sudah saya edit agar tidak terjadi Duplikat Konten
-------------------------------------------------------------------------------------------------------------------
User-agent: Mediapartners-Google
Disallow:

User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0

User-agent: *
Disallow: /search


Sitemap: http://dionlegionis.blogspot.com/feeds/posts/default?orderby=updated
------------------------------------------------------------------------------------------------------------------
Dijamin Jos, kunjung juga ya Infokertasku
Ganti URL dengan URL Sobat, dan pada bagian Tanjuk Robot ganti dengan : Noindex, Nofollow, nodroop pada laman arsip

Makasi ya Sob uda bagi pengetahuan
sangat berguna banget bagi kami, sebagai pemulah
langsung di amalkan
sekali lagi makasi

Thanks! ane langsung praktekin ya ..

ane masih rada rada bingung nih gan sama yang satu ini... :{

jadi bingung soalnya punya ane gak suksek walau sudah ikuti tutorial diatas.

artikel yang sangat bermanfaat , semoga menambah wawasan bagi kita semua kawan www.karyamandirisofa.com

Trimakasih solusinya masgan......belajar internet gratisan http://4happyshare.us/

terimakasih banyak sob atasi triknya... mantab deh ilmunya nih...

Thanks Mas Bro sudah di praktekkan di website rentalmurahmedan.com sebelumnya 13 yang di cekal.....sekarang lagi nunggu hasil mas bro, semogah saja cara ini berhasil....

thanks info mas

mantap artikelnya bermanfaat

Thanks Mas Bro sudah di praktekkan

artikel yang sangat bermanfaat , semoga menambah wawasan bagi kita semua kawan

Trimakasih solusinya mas

Makasi ya Sob uda bagi pengetahuan

Kok di blog-blog sebelah banyak yang ngasih kode Robot yang disallow:search ya gan,,?? ane akn ngopy bru edit url nya aj,,gk ane baca2,,tau2 ada search nya,,ap maksud mreka membuat seperti itu ya,,??

makasih gan,,,tp ane dah ngikutin cara di atas 3 hari yang lalu, belum ada perubahan ya??
barubatu.blogspot.com

Sangat Membantu, Semoga Postingan Ini Bermanfaat

kalau blog saya mh deskripsi nya gak muncul di Serp, bisa diatasi dengan cara ini gak ya?

thanks gan, slesai sudah kebingungan ane.. hehehhhhh...
monggo diaturi gan..
http://deathkillerss.blogspot.co.id

sebenernya ane masih bingung sih sama settingan robots.txt , klw salah setting berdampak buruk buat blog kita sendiri

ane juga ngalami nih, robot.txt nya di cekal yandex pas pendaftaran T_T

saya sudah coba tutorial yang diatas...saya ingin tanya gan kalo yang (tag tajuk robot khusus) itu harus ada yang di rubah juga gak gan?
selain itu robot.txt yang ada di google webmaster apa harus di samakan dengan yang ada di blogger apa nggak gan?

Tolong di balas ya gan....

info yang sangat menarik agan

namun dari beberapa komen yang saya baca, kenapa ada yang bisa dan tidak, bahkan ada yang bertambah?
pengaruh apakah kendala tersebut agan?
terimakasih

Apakah ini masih pengaruh, maaf saya baru menggunakan / belajar ngeblog

bos aku belum paham bos

aku anak kecil tolong di bantu caranya bos

pantesan saja blog saya makin sepi,,,rupanya ini masalahnya

Thanks Infonya.. Sangat membantu

infonya menarik banget bang. saya mau mraktikin :D

tahnks infonya gank

terima kasih mas, semoga dengan ini
visitor saya jadi tambah banyak

makasih bos infonya,baru ketahuan punyaku dicekal semua
konsultasi penyakit kelamin

Thanks gan kunbal http://bisniscandil.blogspot.com

Gan robot blog saya kok gini ya? Apa harus dirubah sitemapnya. Terimakasih
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow:
Allow: /

Sitemap: http://www.fiforlifpelangsingtubuh.com/sitemap.xml

Thanks gan.saya mau coba di mobilsuzuki-bandung.com, semoga dapat diatasi

Makasi gan Pencerahan nya,udah mutar - mutar saya mencari jawaban tentang ini,akhirnya ketemu juga..
sekali lai makasi ya gan...
sukses selalu.

Gan pada penjelasannya sitemap kan pakai http. Trus kalau blog yang pakai https, apakah harus pakai https pada sitemap?

kalau boleh tahu, robot blog ini gmn ya? masalahnya blogku belum apa2 dah main cekal aja tuh om gogel

3,808 yg error dan itu semua url2 dari gambar gimana tuh? apa aman2 aja ngeblock url gambar supaya tdk terindex? saya pake wp nih.

mas mau tanya cara memperbaiki url yang di cekal oleh robots.txt gmna soalnya sudah search sana sini hasilnya ttp 0. sudah saya coba menghapus /search ttp aja. berikut penampakannya
http://prntscr.com/d6zy4w
http://prntscr.com/d6zyqh
http://prntscr.com/d6zyyx
http://prntscr.com/d6zz4g
mohon bantuannya
trimakasih.

ternyata ada beberapa link 404 yang error,
terima kasih infonya.